Muzeum mieści się w pałacu Czartoryskich, którego początki sięgają II połowy XVII wieku. Zbudowano tu wówczas barokową rezydencję. Została ona zniszczona przez wojska szwedzkie, w trakcie III wojny północnej. Odbudowano ją w I połowie XVIII wieku w stylu rokokowym. Kolejne zniszczenia przyniósł najazd rosyjski w 1794 r. Tym razem odbudowa nadała pałacowi wygląd klasycystyczny.
Stworzono wówczas wokół niego nowy romantyczny park krajobrazowy w stylu angielskim. Przy tej okazji powstały – istniejące do dziś – Świątynia Sybilli i Dom Gotycki. Izabela Czartoryska urządziła w nich pierwsze muzeum narodowe na ziemiach polskich.
Jego spadkobiercą jest Muzeum Czartoryskich. Możemy tu poznać losy oraz działalność rodziny Czartoryskich w XVIII i XIX wieku. Liczne eksponaty związane są z historią Polski. Są tu m.in. zbroja husarska, szabla Stanisława Leszczyńskiego, czy miniaturowe sarkofagi ze szczątkami wybitnych Polaków. Po zwiedzeniu muzeum warto udać się na spacer po parku otaczającym pałac.