Zobacz zdjęcie w pełnym rozmiarze

Pierwotnie drewniana budowla obronna wzniesiona przez krzyżaków na przełomie XIII i XIV w. została zastąpiona murowanym założeniem obronnym. Zamek z wieżą i wewnętrznym dziedzińcem był ośrodkiem zakonnej władzy administracyjnej, jako siedziba dowódcy okręgu – prokuratora. Pierwsza pisana informacja o zamku krzyżackim w Szczytnie (niem. Ortelsburg) pochodzi z 1360 r. Po likwidacji państwa zakonnego w Prusach w 1525 r. zamek stracił swe obronne znaczenie i w latach 1579-1581 przebudowano go, z polecenia księcia pruskiego Jerzego Fryderyka, na luksusową rezydencję myśliwską.