Pałac należy do jednych z najlepiej zachowanych renesansowych budowli w Polsce. Został wybudowany w latach 1550-1563 przez człowieka o imieniu Rumpold von Talkenberg z Podskala.
Najbardziej burzliwy okres do zamku to XIX wiek. Z czasów wojen napoleońskich pochodzi legenda o skarbie ukrytym na jego terenie. Miał to być niewypłacony żołd dla wojska, nieznaleziony do dziś. Około 1830 roku hrabia von Nostitz podjął decyzję o sprzedaży rządowi pruskiemu. Ten przeznaczył zabytek na... zakład dla umysłowo chorych. Pełnił funkcję szpitalne aż o końca II wojny światowej, podczas której dokonywano tam masowych eutanazji.
Obecnie mieści się tutaj Chrześcijański Ośrodek Elim. Założony został on przez baptystów z Austrii - Kennetha i Giselle Herweynenów.
Wejście jest darmowe, lecz nie wszystkie pomieszczenia są udostępnione do zwiedzania.