The museum in Pysely was founded in 1937. The main person behind it was Arnost Chvojka. The collection was greatly varied and grew to as much as a thousand exhibits. The museum was closed in the 1950s and the collection was distributed among other museums in the region. Efforts to re-establish the museum began in the early 1990s. The current permanent display was installed on the second floor of a house owned by the municipality and opened to the public for the first time on 3 November 1996.
Areál s farou a ohradní zdí z druhé poloviny 18. století. Obdélná přízemní fara s mansardovou střechou a velkým osovým štítem. Fasáda domu je zdobena pilastry a další štukovou výzdobou. Vstupní portál z červeného pískovce.
Zámek je původně renesanční stavbou čtvercového půdorysu z 16. století, s významnou barokní úpravou a dostavbou provedenou v 18. století a novou klasicistní fasádou z 19. století. Před zámkem stojí barokní sousoší sv. Jana Nepomuckého, rovněž dílo Ignáce Františka Platzera. Zámek je obklopen zámeckým parkem.