В северо-западной части замка возвышается квадратная в плане башня «Длинный Герман», возведенная из местного камня на связующем растворе. Ярусы башни разделялись балочными перекрытиями и сообщались между собой лестницей, устроенной в южной стене. В своем первоначальном виде до настоящего времени дошла только нижняя часть башни, а верхняя ее часть была восстановлена и надстроена после взрыва в 1593 году. За этим последовало соединение восточного и западного крыла замка. Тесный и грузный комплекс замковых сооружений с его тяжеловесными башнями отделялся от города глубоким рвом, через который был перекинут подъемный мост.
Ивангород сильно стеснил свободу рыцарей, способствовал упадку их торговли и крайне затруднял рыболовство, которое для жителей Нарвы было весьма существенным занятием. С тех пор они вынуждены были ездить к самому устью Наровы или даже выходить в открытое море.
К этому времени относится и старинное предание о рыцаре Беренгаупте.