Воздвигнутый в XIV веке замок является самым старым и самым ценным архитектурным памятником Ольштына- столицы Вармии и Maзур. В течение веков представлял сердце города, который развивался в его тени. Когда-то был домом Николая Koперника, теперь находится Музей Вармии и Maзур, а комнаты и двор открыты для посетителей.

Замок построен в готическом стиле приблизительно в 1348 г. Каменная конструкция возникла на месте земляной-деревянной сторожевой башни, заложенной в излучине реки Лыны в 1334 г. Изначально замок состоял только из одного, северного крыла, которое закончено в II половине XIV в. Южное, с массивной, 30-метровой круглой башней, достроено в половине XV в.

Времена средневекового великолепия
Oльштынская крепость была резиденцией администратора земских угодий Варминского Капитула. С самого начала выполняла функцию обороны и была также хранилищем казны капитула. Оборонительные качества бастиона сыграли важную роль в 1356 г., когда замок безрезультатно пробовали взять штурмом литовцы.  Замок до 1454 года подчинялся рыцарям Тевтонского ордена и сыграл важную роль во время войн поляков с крестоносцами. В 1410 году после битвы под Грюнвальдом замок сдался полякам без единого выстрела, а в 1414 году перешёл в польские руки после короткой осады. Во время тринадцатилетней войны переходил с рук до рук, был оккупирован крестоносцами и окончательно перешёл во владение Польшей вместе с Вармией на основании II торуньского мира в 1466 г. Опять крестоносцы стали угрожать городу и замку в 1521 году. Они успели провести только один штурм и отступили. Защиту города и замка успешно приготовил и провёл Николай Коперник, исполнявший тогда должность администратора имущества Варминского Капитула. В память о его пребывании в замке осталось несколько вещей, в том числе уникальная астрономическая доска на стене внутренней галереи.

Новая жизнь древнего здания
На протяжении следующих веков замок потерял оборонное значение. В 1756-58 годах достроено восточное крыло для обитателей замка в стиле позднего барокко. После первого разбора Польши в 1772 г. крепость перешла под господство Прусского Королевства. Капитальный ремонт, устранивший некоторые признаки готики был проведен в замке во II половине XIX в. Перестроенное в начале прошлого столетия здание, счастливо пережила обе мировых войны.
Сегодня здание состоит из двух готических крыльев, соединённых со стороны Лыны стеной, а также части, выполненной в стиле позднего барокко, через которую ведет вход во двор. Там мы увидим каменную статую, так называемой, прусской бабы, привезенной с Барцян, версальский межевой камень с 1919 г., а также бывший колодец. До 2006 г. возле нее росла известная, 120-летняя липа, которую, однако, уничтожила сильная буря. Во внутреннем дворе с 1974 г. проходит фестиваль "Поем поэзию".
Ведущая к входу дамба делит древний ров на две части. В левой части находится Амфитеатр им. Чеслава Немена, в правой- парк с остатками говорят - парк с остатками круглой башни. У входа на дамбу можно посидеть на скамейке Коперника.На южной стороне здания сохранился дом служащих замка XVII века, так называемый Соляной Склад.