На месте прусского городища Унзетрапис на реке Анграпп в 1336 году
магистром Тевтонского ордена Дитрихом фон Альтенбургом был заложен
деревянный замок для защиты от литовцев.
Примерно в 1380 году замок был перестроен в камне, однако его постигла
судьба деревянного замка. Он дважды был разрушен и сожжён: в 1376 и в
1457 году. Но сооружённая из больших полевых камней кладка основания
пережила пожары и разрушения.
Замок Инстербург в сохранившемся позднем виде имел характерные черты
восточно-прусских средневековых оборонительных сооружений, в которых
совмещались функции боевой крепости и места проживания рыцарей.