Seit 1424 steht an diesem Platz ein Schloss - 560 Jahre später zog die Bayerische Musikakademie hier ein.
Seit 1424 stand an diesem Platz ein Schloss - es war "des Bischofs Haus zu Oberdorf"
1505 - 1517 wurde es von Grund auf neu erbaut durch Fürstbischof Heinrich von Lichtenau
1722 - 1729 entstand der Neubau des heutigen Schlosses als Jagdschloss durch Fürstbischof Alexander Sigismund, Pfalzgraf bei Rhein. Baumeister war Johann Georg Fischer.
Das Schloss war bis 1748 Sitz der bischöflichen Beamten.
1761 wurde der Bau durch den Ausbau des Nordflügels durch Fürstbischof Joseph, Landgraf von Hessen vollendet.
Der letzte Fürstbischof, Clemens Wenzeslaus, Kurfürst von Trier, kgl. Prinz von Polen und Sachsen machte es zu seiner Sommerresidenz und ließ 1774 die Lindenallee anlegen. Er starb hier am 27. Juli 1812.
1819 Übersiedelung des Oberdorfer Rentenamtes ins Schloss
1864 Messungsbehörde: das heutige Vermessungsamt
1876 Umzug der Präparandenschule ins Schloss (bis 1923)
Landratsamt bis 1967
1967: Brand im Schloss, der West- und Südflügel standen leer bis 1984
Seit 1984 Sitz der Bayerischen Musikakademie.
1996 Bau des neuen Konzertsaales - unterirdisch vor dem Schloss
