Впервые Тапиау упоминается в 1258 году как владение прусского аристократа, присягнувшего на верность Тевтонскому ордену. Территория, на которой впоследствии был возведён замок, была захвачена тевтонцами в 1265 году. В 1265 году деревянно-земляная крепость была перестроена. По приказу магистра Тевтонского ордена Анно фон Зангерсхаузена крепость возвели на высоком северном берегу реки Преголя.
В 1275 году крепость Тапиау подверглась штурму войска литвинов.
В 1280-1290 годах крепость перенесли. Под руководством комтура Ульриха Бауера (нем. Ulrich Baier) была построена новая деревянная крепость на низменном полуострове при слиянии Преголи и Деймы, окруженном с трёх сторон болотом. В 1283-1301 годы крепость являлась центром комтурства, первым комтуром был Ульрих Бауварус (Баварский, нем. Ulrich Bauwarus).
С 1290 года крепость называлась Тапио, с 1299 года Тапиов, название Тапиау закрепилось за замком только с середины XV века.
В 1330-е годы комтурская резиденция была перенесена в замок Инстербург, а территория Тапиау с замком вошла в состав Кёнигсбергского комтурства, управляемая орденским маршалом.
В 1309 году Верховный магистр Тевтонского ордена брат Зигфрид фон Фейхтванген перенёс свою резиденцию из Венеции в Мариенбург. После этого началось массовое строительство замков в камне. В 1347-1359 годах на месте старого укрепления Тапиау был выстроен каменный четырёх-флигельный замок.
В XIV веке замок играл важную роль при организации военных походов в Литву. В 1377 году в замке Тапиау останавливался герцог Альбрехт фон Остеррайх Австрийский вместе со своей свитой из пяти графов и 50 рыцарей и оруженосцев. Также в замке останавливался и будущий король Англии Генрих IV-й в период, когда он возглавлял крестовый поход против литовцев в 1390-1391 годах как граф Дерби.
В 1385 году Великий князь литовский Витольд в результате политических интриг бежал от своего двоюродного брата Ягайло в Пруссию и чтобы добиться расположения Ордена был крещён по католическому обряду. Крещение произошло в замковой капелле в Тапиау.
Во время Тринадцатилетней войны в 1454 году противодействовавший ордену «Прусский союз» воспользовался отсутствием в замке гарнизона и захватил его. В следующем 1455 году орден, после продолжительной осады, отбил замок.
В 1474 году Орденом был захвачен Самбийский (Замландский) епископ Дитрих фон Куба. По приказу великого магистра Генриха фон Рихтенберга епископ был заточён в подвалах замка, где и умер. В подземелья замка уже тогда бросали многих неугодных Тевтонскому ордену особ. На экскурсии мы узнали, что в 1474 году в подземелье был брошен епископ Дитрих фон Куба. Дитрих фон Куба был знаменит тем, что, будучи ставленником Папы Римского, желал вернуть рыцарей Ордена в лоно святой церкви, в то время как последние хотели жить более по законам рыцарским, а не духовным. Вёл себя высокомерно, да ещё и осмелился критиковать великого магистра Тевтонского ордена Генриха фон Рихтенберга. Сперва епископа держали в покоях под стражей, как и положено человеку его положения. Но после попытки побега его заточили в подземелье, приковали к стене и оставили умирать голодной смертью. Поговаривают, что его крики были слышны в замковой церкви, расположенной над местом его заточения. После этого происшествия о замке пошла дурная молва.
После Краковского мира 1525 года и последовавшей секуляризации (реформации) ордена последний магистр ордена Альбрехт Гогенцоллерн стал светским правителем герцогства Пруссия, главной резиденцией герцога стал замок Кёнигсберг. В середине XVI века по приказу герцога Пруссии Альбрехта в замке была проведена масштабная реконструкция. Тапиау был любимым местопребыванием герцога Альбрехта, здесь он скончался 20 марта 1568 года в 78-летнем возрасте, где он попытался спрятаться от охватившей Кёнигсберг эпидемии чумы. Чума его и здесь нашла, здесь же его и изначально захоронили, а через какое-то время его прах был перемещён в склеп Кафедрального собора Кёнигсберга. Сегодня рядом с собором можно увидеть памятник этому человеку. Примечателен тот факт, что в тот же день и год, пережив всего несколько часов своего супруга, в другом замке Нойхаузен умерла его 36-летняя жена Анна-Мария. Так и хочется тут приписать: «жили они счастливо и умерли в один день», но увы, это вряд ли, учитывая что как супруга страдала серьёзным психическим заболеванием, так и их сын.
Ещё одна известная личность «засветилась» в замке Тапиау. В 1541 году здесь находился известный астроном Николай Коперник, который слыл и в качестве врачевателя. Здесь он излечивал мажордома замка Георга фон Кунхайма от простудного заболевания.
В мае 1697 года в Тапиау остановилось Великое посольство Петра I-го. Около двухсот человек провели в здесь одну ночь, однако сам царь в замке не был. При прибытии в порт Пиллау (нынешний Балтийск), Пётр I-й на небольшом судне отправился в Кёнигсберг.
В 1786—1797 годах, в период правления короля Фридриха Вильгельма II, в замке Тапиау был открыт приют для бедных. До 1792 года замок значился резиденцией арендатора государственного имения Кляйнхоф. В 1792 году на фундаментных стенах форбурга замка был построен корпус королевского дома призрения для сельской бедноты и инвалидов (ветеранов войн). В результате перестроек три флигеля замка были снесены.
В 1794 году учреждение было передано в управление прусским сословиям. В 1797 году в нём числилось 217 мужчин и 108 женщин.
В 1800 году заведение было преобразовано в исправительное учреждение для бродяг, нищих, сутенёров и проституток (Corrections- und Besserungsanstalt Tapiau). В 1801 году числилось уже 438 мужчин и 163 женщины.
Позднее замок было решено переоборудовать под тюрьму. В 1879 году единственное сохранившееся средневековое здание замка было перестроено. Были надстроены два этажа, оформленные в псевдоготическом стиле. Верхний этаж был отдан под церковь для заключённых.
В 1885 году сохранившиеся строения замка исследовал и обмерял правительственный архитектор Конрад Штейнбрехт.
К началу 1911 года в тюрьме содержалось 176 мужчин и 38 женщин.
Битва на Мазурских озерах 6 сентября 1914 года. 8-я немецкая армия смогла вынудить 1-ю русскую армию отступить за Ангерапп своим южным крылом окружения, развернутым у Гольдапа.
Вскоре после начала Первой мировой войны в Восточную Пруссию с востока вторгалась русская армия. В ходе Восточно-Прусской наступательной операции в августе 1914 года русскими войсками был занят Инстербург, немецкие войска отступали. В конце августа русские войска достигли Тапиау и начали артиллерийский обстрел города. Оборонявшие город вели ответный обстрел. Немецкие позиции Прегельско-Даймского участка обороны были слабыми, долго оборонять Тапиау не было возможностей. 27 августа был последний пассажирский поезд из Тапиау в Кёнигсберг. Артиллерийская дуэль продолжалась до 29 августа. В этот день было объявлено о победе Гинденбурга над 2-й русской армией Самсонова под Танненбергом, а русские войска прекратили обстрел и отступили. 10 сентября 1914 года русским войскам был дан приказ к отступлению из Восточной Пруссии. От обстрелов русской артиллерией город серьёзно пострадал, также был серьёзно повреждён замок — верхняя, надстроенная часть замка сгорела. 27 сентября 1914 в замок возвратились немногочисленные заключённые исправительного дома, ранее эвакуированные в Западную Пруссию в город Кониц.

После Первой мировой войны замок был восстановлен. К 1917 году единственное сохранившееся средневековое здание (форбург) замка было реконструировано — надстроенные верхние этажи в готическом стиле снесли и возвели традиционную для средневековых замков четырёхскатную черепичную крышу. Таким образом был воссоздан его предполагаемый первоначальный вид.
В времена Веймарской республики на территории замка также располагалась тюрьма.
В январе 1945 года советские войска начали наступательную Восточно-Прусская операция на территории Восточной Пруссии. Город Тапиау был взят советскими войсками 25 января 1945 года в ходе Инстербургско-Кенигсбергской операции. Уже в апреле 1945 года в здании замка начал работать следственный изолятор для подозреваемых в военных преступлениях. В июле 1945 года на северной части Восточной Пруссии минобороны СССР организовало Особый военный округ. К августу 1945 года на Потсдамской конференции участники решили разделить Восточную Пруссию между Советским Союзом и Польшей.
26 декабря 1945 года заместитель наркома внутренних дел СССР генерал-полковник Круглов приказал уполномоченному НКВД СССР по Восточной Пруссии генерал-майору Трофимову сосредоточить в детской трудовой колонии всех несовершеннолетних задержанных немцев, до 14 лет включительно. При этом начальнику отдела НКВД СССР по борьбе с детской беспризорностью и безнадзорностью генерал-майору Леонюку было приказано организовать в городе Тапиау детскую трудовую колонию для содержания несовершеннолетних немцев с лимитом 600 человек.
С февраля 1946 года изолятор был преобразован в трудовую колонию для несовершеннолетних. 7 апреля 1946 года Указом Президиума Верховного Совета СССР на территории Особого военного округа была образована Кёнигсбергская область в составе РСФСР. А 7 сентября 1946 года город Тапиау был переименован в Гвардейск.
В 1947 году колонию для несовершеннолетних преобразовали в пересыльную тюрьму. В нём содержали осуждённых перед этапированием из Калининградской области в СССР.
В июле 1952 года был организован лагерный пункт №2. Исправительная колония находилась в замке до 2021 года.
К осени 2021 года завершился перевод исправительной колонии №7 из замка Тапиау в другие учреждения ФСИН на территории Калининградской области. 14 сентября 2021 года ФСИН России официально передала замок Тапиау Калининградской области. УФСИН передало замковый имущественный комплекс из 48 объектов. 28 сентября 2021 года замок Тапиау перешёл под охрану Калининградского областного историко-художественного музея. Учреждение будет управлять памятником до тех пор, пока правительство Калининградской области не найдёт инвестора. 16 декабря 2021 года Росимущество сообщило о завершении передачи замка в собственность Калининградской области.
28 апреля 2022 года одобрили концепцию восстановления замка Тапиау в Гвардейске. На территории бывшей тюрьмы планируют снести все постройки поздних периодов, не относящиеся к объектам культурного наследия. Форбург собираются превратить в выставочный центр. Инвестор обсуждает возможность изменить его внешний вид, надстроив «историческую» часть (снесённую в 1917 году надстройку 1879 года).
В марте 2023 года стены форбурга были очищены от штукатурки, под которой оказался ромбовидный геометрический узор из глазурованного кирпича.
Источники:
https://spratto.livejournal.com/56790.html
https://ru.wikipedia.org/wiki/Замок_Тапиау