Początki rezydencji sięgają XVI wieku. Istniał tu wówczas murowany dwór. W XVII wieku zmieniono go w barokowy pałac. Później przebudowywano go jeszcze dwukrotnie: w XVIII wieku w stylu rokokowym i w XIX wieku w stylu klasycystycznym. Obecnie mieści się tu Miejski Dom Kultury.
Można tu zobaczyć kilka stałych ekspozycji: rekonstrukcję wnętrz pałacu z czasów jego ostatnich właścicieli, rekonstrukcję mieszkania Himilsbachów, ekspozycję związaną z Piwnicą pod Baranami oraz wystawę przybliżającą postać Karla Gustawa Mannerheima, rosyjskiego dowódcy, który stacjonował w Mińsku Mazowieckim w latach 1909-1911, późniejszego… prezydenta Finlandii.
