Horní gotický hrad ze 14. století je přestavěn na renesanční zámek z 16. století. Roku 1675 postavil František Maxmilián z Talmberka za účasti stavitele O. de Guarde zámek. Dnes se v něm nachází muzeum s mnoha expozicemi, informační centrum a Zámecký šenk.
Hrad byl postaven v 1. polovině 14. století Jindřichem z Lipé, pojmenován byl Pirkštejn v roce 1366 na paměť původního rodového sídla pánů z Lipé a Dubé. Dnes jsou interiéry hradu návštěvníkům nepřístupné.