Примыкая к восточной городской стене, мрачная твердыня с XII века служила зимней резиденцией графов Андехс, и как она тогда выглядела, теперь не скажет никто. Известно, что за толстыми стенами имелось нечто похожее на дворец (нем. Hofburg), а перед ним расстилался двор, какое-то время носивший имя первых владельцев – Андехсхоф. С 1420 года он именовался просто Новым и под таким простым названием служил сначала эрцгерцогу Сигизмунду Габсбургу по прозвищу Богатый, затем став полезным его сыну Максимилиану. Именно их, а не баварцев, принято считать основателями замка, возможно потому, что тех не занимала мысль об упорядочении хаотичной застройки. Сигизмунду, например, принадлежит идея устройства прекрасных Готических подвалов, а император распорядился возвести Гербовую башню на входе в город, как раз там, где позже появилась Придворная церковь.
Прибывший после него эрцгерцог Фердинанд I, тоже Габсбург, и тоже император Священной Римской империи, хотел превратить крепость в некое подобие королевского жилища, однако отсутствие денег не позволило мечтам воплотиться в реальность.
То, что видят сегодняшние посетители замка, появилось благодаря австрийской эрцгерцогине Марии-Терезии в 1754–1773 годах.
Основное строительство в стиле венского рококо вели придворный архитектор Иоганн Мартин Гумпп-младший и Константин Иоганн Вальтер, которые работали по проекту своего более именитого коллеги Николауса Пакасси. Тогда же и в том же стиле приобрели царственный вид большие залы дворца, и Марии-Терезии, как создательнице этого великолепия, был посвящен гигантских размеров Парадный зал. Император Карл VI Габсбург не имел сыновей, и, чтобы сохранить трон для династии, его старшая дочь Мария-Терезия вышла замуж за принца Лотарингского Франца-Стефана. Не сыграв значительной роли в политике, он, однако, преуспел в семейных делах, поскольку сумел увеличить австрийское правящее семейство на 10 человек. Своеобразной выставкой его достижений в этой сфере является Парадный зал Хофбурга, украшенный портретами самой эрц-герцогини, ее супруга и их десяти детей. За несколько веков здесь скопился настоящий фамильный архив, куда вошли портреты внуков царственной четы и других, порой очень дальних, родственников.
После перестройки времен Марии-Терезии в Парадном зале уже не проводились торжества, и он стал напоминать семейную гостиную. Тем не менее надобность похвалиться красотой, богатством и иными лучшими качествами предков не отпала. Возможно, поэтому в нем остались картины-великаны, написанные еще при Максимилиане I. Помещенные рядом композиции венского придворного художника Франца-Антона Маульберча представляют объединение династий Габсбургов и Лотарингов. Сцены, изображенные на огромных фресках, показывают, чем в старину жил Тироль и что обеспечивало его процветание: горнодобывающее дело, ремесла, земледелие, охота, рыболовство, транспорт и торговля. Бесконечно длинные полотна фресок, живописно рассказывая о богатствах горного края, в то же время выдают связь Лотарингии с Австрией, которая всегда ассоциировалась с Габсбургами.