Das Schloss aus der 2. Hälfte des 16. Jhs. wurde an der Stelle der Burg der Herren von Osek gebaut.
Am Ende des 17. Jhs. wurde das Schloss im Barockstil gemäβ dem Architekten Jean Baptist Matheve umgebaut.
Am Anfang des 18. Jhs. wurde das Schloss gemäβ K. M. Kaňka umgebaut.
Im Jahre 1959 wurde aus dem aufgelösten Spital eine seltene Freske in die Kuppel des Pavillons übertragen. Die letzte Jahre seines lebens hat hier der Bibliothekar Giacomo Casanova verbracht.
In dem Schloss weilten: J. W. Goethe, F. Schiller, L. van Beethoven, F. Chopin, J. Haydn und W. A. Mozart.