Gotycka budowla powstawała w latach 1341-1363. Miał w niej swoją siedzibę pierwszy krzyżacki wójt Lęborka – Dytrych von Loupheim. Był to drugi pod względem wielkości zamek w państwie krzyżackim – ustępował tylko Malborkowi. Wielokrotnie przebudowywany, zatracił pierwotny wygląd. Obecnie jest siedzibą Sądu Rejonowego.
W czasach krzyżackich zamek posadowiony był na planie prostokąta o wymiarach 50x60 m, posiadał trzy czworokątne baszty, otaczała go fosa. Dodatkowo wykopano kanał, który doprowadzał wodę z rzeki Łeby do zamkowego młyna i browaru. Obszerna część mieszkalna miała, oprócz piwnic, trzy kondygnacje.
Do dzisiaj zachowały się zarysy ostrołukowych okien, gotycki szczyt schodkowy oraz prostokątna klatka schodowa w kształcie wieży. Na dziedzińcu sądu umieszczono repliki średniowiecznych narzędzi do wymierzania kar – dyby i pręgierz.