The upper Gothic style castle from the 14th century was reconstructed into a Renaissance chateau in the 16th century. František Maxmilián of Talmberk built a chateau in 1675 with the participation of the architect O. de Guarde.
Majestátní kamenné sídlo stojí na skalnatém ostrohu nad řekou Sázavou už téměř 780 let. V jeho zdech se vystřídalo na 20 generací rodu Sternbergů. Během prohlídky se návštěvníci seznámí s příběhy zejména posledních majitelů a způsobem jejich života. Přístupná je i jižní předsunutá bašta hradu, zvaná „hladomorna“, která byla součástí důmyslného opevňovacího systému.
Hrad byl postaven v 1. polovině 14. století Jindřichem z Lipé, pojmenován byl Pirkštejn v roce 1366 na paměť původního rodového sídla pánů z Lipé a Dubé. Dnes jsou interiéry hradu návštěvníkům nepřístupné.