Historia Pałacu Wedlów sięga średniowiecza. Jego początki związane są z rodem, który w XIV w. zbudował w tym miejscu zamek. Jednak to nie Wedlowie, a ród Güntersbergów miał największy wpływ na rozwój pałacu, przekształcając go z warownego zamku w renesansową rezydencję. Pałac wielokrotnie ulegał zniszczeniom w wyniku pożarów i działań wojennych, co przyczyniło się do jego licznych przebudów. Po pożarze w 1771 r. został odbudowany w stylu klasycystycznym. W XX w. pałac popadł w ruinę i dopiero w 2010 r. ukończono jego gruntowną renowację, odkrywając przy tym fragmenty średniowiecznego zamku.
W pobliżu pałacu znajduje się także Kamień Szlifierski, owiany legendą mówiącą, że dawniej służył on do “szlifowania” języków kłamców i gburów, aby nauczyć ich prawdomówności i grzeczności. Kamień zaginął po II wojnie światowej, ale został odnaleziony i obecnie znajduje się na swojej pierwotnej lokalizacji nad jeziorem Młyńskim.
