Šiaurės Lenkija didžiuojasi gausiu viduramžiais statytų pilių ir tvirtovių paveldu. Lidzbark Warminski (tuomet vadinamas: Heilsberg) – ne išimtis. Tai miestas su didinga gotikos stiliaus pilimi, pastatyta 1350-1401 metais vietoje prūsų pilies Lecbarg, buvusios Alnos ir Simsarnos upių santakoje.
Tvirtovė ilgus šimtmečius vykdė sargybos posto, ginančio rytinę Varmės sieną, funkciją. Vėlesniais laikais, dėl savo išskirtino grožio ir funkcionalumo, gyvavo kaip Varmės vyskupijos kapitulos rezidencija. Pilies salių interjeras - puikus fonas pastovioms ir laikinoms ekspozicijoms (Varmės ir Kryžiuočių ordino viduramžių menas, Iškilūs Lidzbarko pilies gyventojai, XVII-XX a. ikonos, Pilies ginklai ir pan.)
Čia keletą šimtmečių ne tik savo valdžios didybę įrodinėjo aštuoni reziduojantys vyskupai, bet gyveno, kūrė ir savo filosofines tiesas įrodinėjo žymūs mokslininkai, menininkai bei filosofai (L.Watzenrode, M.Kopernik, A. St. Grabowski, M. Kromer ir k t.