Das spätgotische Obere Schloss ließ der protestantische Friedrich von Salhausen in den Jahren 1522–1524 erbauen. Die Paläste des unteren Schlosses, die zwischen 1540 und 1578 entstanden, sind ein charakteristisches Beispiel der sächsischen Frührenaissance in Böhmen.
Der Besitz der protestantischen Salhausen wurde nach 1620 enteignet und der Besitz der beiden Schlösser getrennt. Das untere Schloss erhielt Wilhelm Kinsky von Wchinitz und Tettau. Dieser wurde 1634 zusammen mit Wallenstein ermordet, sein Vermögen konfisziert und das Schloss erhielt der kaiserliche General Johann von Aldringen. Das obere Schloss bekam Christoph Simon Graf von Thun und Hohenstein. Beiden Geschlechtern diente das Schloss als Sommerresidenz und Wohnort für die Gutsverwalter und Förster.