En direction sud-ouest du château actuel de Komorni Hradek se dressait sur l’éperon avec des ravins brusques qui tombaient dans la vallée de la Sazava Hradek Cajchanov fondé probablement vers la fin du 13e siècle et dont les pauvres restes conservés se trouvent à 200 mètres environ du château. Il appartenait autour de 1400 à Jan Zoula d’Ostredek qui participa avec son groupe à la petite guerre locale en Bohème à l’époque d’emprisonnement du Roi Vaclav IV par l’union seigneuriale. En 1404 le groupe de Zoula a captivé par la garnison du pays et Hradek a été détruit après la conquête. Le lieu de son emplacement a été donné par le roi ensemble avec des biens accessoires au sous-chambellan Mikulas.
Le burgrave de Vysehrad Racek de Dvojice a obtenu l’autorisation du roi de construire le nouveau château fort. Son château a été dénommé Vesele. Racek siégea ici jusqu’à 1416 quand il a été tué par les mineurs à Kutna Hora en tant que le messager royal. La veuve de Racek a transmis ensuite ses droits aux biens locaux à Vilem Kostka de Postupice. Il a été suivi après par son fils ainé Bohuse qui encore racheta le château-fort voisin Duba. Il détenait en 1516 Hradek, ainsi que les biens de l’ancien monastère de Sazava. Jaroslav de Selmberk a acquit Hradek en 1525 qui exerçait pendant longtemps la fonction du Haut chambellan au Royaume de Bohème et selon sa fonction on commença à appeler son siège Komorni Hradek.
La grande reconstruction de renaissance et l’élargissement du château date seulement du temps de la gestion tutélaire après la mort de Valdstejn : l’aille est avec l’escalier principal et avec la grande salle ont été construits, toutes le quatre ailles du bâtiment du château ont atteint la hauteur de deux pieds et quelque part ont été rajoutées des nouvelles voutes. Le constructeur suivant sur Hradek était Adam de Valdstejn qui exerça des fonctions importantes royales (Burgrave suprême, Vice-titulaire royal). Il a fait démolir sur Hradek des remparts médiévaux devant le portail ouest en partie devant le portail sud du château, il a fait enlever le pont escamotant qui passait au-dessus de fosse de la forteresse, et il a fait finalement construire un nouveau château à trois ailles et à un étage avec une tour rectangulaire disposée au-dessus de l’entrée principale.. La fosse devant le portail ouest a été surmontée par un pont en pierre et sur la place de la fosse sud remblayée a été aménagé le jardin de renaissance. Le fils d’Adam Jan Viktorin a procédé autour de l’année 1660 aux aménagements coûteux de l’intérieur du château. Quelques locaux au rez-de-chaussée ont été décorés par des stucs manéristiques qui représente la plus grande valeur du patrimoine historique de ce site.
A l’époque de Frantisek Josef de Valdstejn il a été procédé à Hradek à des aménagements baroques, quand il l’a acquit la seigneurie local en 1713. Dans l’aille nord de l’ancien château a été construite une grande chapelle au portail à l’enseigne donnant sur la cour. Dans l’aille principale du nouveau château a été aménagée une grand salle au plafond surélevé avec un décor riche de stuc. De la même manière ont été décorés également des autres locaux au 1er étage. Il est possible de voir aussi des motifs au figurines, des motifs décoratifs d’ornements, des peintures murales et sur plafonds et tout ceci dans l’esprit du baroque flamboyant.