Zamek został zbudowany w XIV wieku. Początkowo stanowił siedzibę wójta. Z czasem coraz częściej wykorzystywali go wielcy mistrzowie krzyżaccy podczas polowań, czy letniego wypoczynku.
Często cierpieli oni z powodu kamieni nerkowych. Woda w Malborku, gdzie rezydowali, była słabej jakości. Do Sztumu przyjeżdżali, aby podreperować zdrowie, miejscowa woda uchodziła bowiem za leczniczą.
Jak podaje wzmianka z 1406 r. Ulrich von Jungingen miał tu swój prywatny zwierzyniec z atrakcjami w postaci niedźwiedzi, lwów, czy wielbłądów.
Po wojnie trzynastoletniej Sztum został włączony do Królestwa Polskiego, a po I rozbiorze Polski przypadł Królestwu Prus. Historia nie była łaskawa dla zamku. Do dzisiaj zachowały się jedynie fragmenty dawnej warowni.