Gotische burcht uit de 14de eeuw was tot een renaissancistisch kasteel uit de 16de eeuw verbouwd. In 1675 bouwde František Maxmilian van Talmberk, met medewerking van de bouwmeester O.de Guarde, een kasteel.
Hrad byl postaven v 1. polovině 14. století Jindřichem z Lipé, pojmenován byl Pirkštejn v roce 1366 na paměť původního rodového sídla pánů z Lipé a Dubé. Dnes jsou interiéry hradu návštěvníkům nepřístupné.
Hrad Talmberk založil Hroznata z Úžic z moravského rodu Kouniců někdy po roce 1284. Byl totiž purkrabím Pražského hradu a za služby prokazované králi Václavovi II. dostal území severně od řeky Sázavy, kolem Úžic. První písemná zpráva o hradu pochází z roku 1291, kdy došlo k dělení majetku mezi syny Hroznaty. Hrad se statkem tehdy dostal Arnošt, který ho dostavěl. Od poloviny 16. století je uváděn jako pustý.