Вестминстер предназначался отнюдь не только для торжеств, и пришлось ему повидать не только коронации или пиры. Вестминстерхолл служил местом слушаний уголовных и гражданских дел, поскольку именно там проводили заседания Суда королевской скамьи, канцлерского суда и суда общих тяжб. Там заседал и английский парламент. За следующий, XV век дворец постепенно становился не столько местом, где жил король, сколько местом, где работала королевская администрация. И когда в 1511 году Генрих VIII и его супруга Катерина Арагонская пышно отмечали там рождение наследника, который, увы, вскоре скончался, это празднование оказалось для дворца последним.
В следующем году там вспыхнул сильный пожар, поглотивший значительную часть здания с личными покоями короля, и Генрих VIII, который за время своего царствования выказал себя просто-таки коллекционером дворцов, больше там никогда не жил. Официально Вестминстер все еще был резиденцией монарха, и в Вестминстер-холле праздновали коронации, но в остальном дворец заняли теперь парламент и суды, и он уже почти не был связан с частной жизнью монарха. А в 1536 году вышел акт, постановивший, что Вестминстерский дворец, «старый дворец короля», юридически отныне только часть «нового дворца короля», впоследствии получившего название Уайтхолл.
Правда, парламенту во дворце приходилось нелегко — как и любой старинный дворец, Вестминстерский представлял собой нагромождение построек разного времени, часть из которых пострадала во время пожаров и так и не была восстановлена, а часть просто не была предназначена для заседаний, да еще не одной, а сразу двух палат — палаты лордов и палаты общин. И если первая все эти годы заседала в «палатах королевы», самой старинной части дворца, то вторая, начиная с 1547 года, начала заседать в часовне Святого Стефана.
В 1605 году заговорщики едва не взорвали палату лордов в день открытия парламента вместе с представителями обеих палат и самим королем Иаковом I, однако Пороховой заговор был раскрыт, и с тех пор 5 ноября в память об этом событии празднуют ночь Гая Фокса, паля из фейерверков и сжигая чучело Фокса, который собирался поджечь фитиль, тем самым изменив судьбу Британии.
В январе 1649 года в Вестминстер-холле состоялось заседание суда, и на этот раз судили не кого-нибудь, а короля Карла I.
Можно по-разному относиться к личности этого монарха, но нельзя не посочувствовать тому, кому довелось побыть заключенным, стать осужденным и шагнуть на эшафот, и все это — в стенах своих лее дворцов.
Когда на престол взошел Георг IV, он поручил архитектору сэру Джону Соану реконструировать палату лордов — старинное здание, которое некогда пощадил так и не случившийся взрыв Порохового заговора, снесли, а вместо него выстроили так называемую Королевскую галерею. Здание было в модном неоклассическом стиле, и чтобы оно хотя бы как-то соответствовало остальному дворцу, архитектору пришлось украсить фасад готическими деталями. Словом, Вестминстерский дворец пытались починить, реконструировать, изменить то в одном месте, то в другом, что только ухудшало ситуацию.
Потом случился пожар. Один из современников, имея в виду старый Вестминстерский дворец, сказал, что ему казалось, что «с потерей этого молчаливого свидетеля история моей родной страны превратится в сон, в котором скользили бы тусклые тени участников событий».
В марте 1835 года была назначена особая комиссия по восстановлению дворца. Здание должно было быть в «национальном стиле», и решили, что это будет готический или елизаветинский стиль. В 1836 году победил архитектурный проект Чарльза Барри. По его плану уцелевшие старинные строения, такие как Вестминстер-холл и башня, некогда использовавшаяся для хранения казны, должны были быть вписаны в новое здание.
Первый камень заложили в 1840 году, спустя двенадцать лет были готовы помещения для палаты общин и палаты лордов (вторая — на несколько лет раньше), но всего работы заняли около тридцати лет. Новый парламент был огромным. Более тысячи комнат, коридоры общей длиной чуть меньше пяти километров; башня Виктории, названная в честь правившей тогда монархини, была в 1860 году вторым по высоте зданием в мире.
Королевская галерея — огромный зал, по которому проходит королевская процессия в день открытия парламента. Стены и потолок расписаны фресками на тему легенд о короле Артуре, военного прошлого страны или самых важных сцен со страниц исторических хроник, портреты монархов. Окна — с витражами в виде гербов.