Замок сооружен на фундаменте средневекового дворца, которым на протяжении многих веков владели епископы города Винчестера. Юный король Эдуард VI, известный русским читателям по роману Марка Твена «Принц и нищий», продолжавший во время своего недолгого правления борьбу с католиками, которую начал его отец, конфисковал поместье у епископов и подарил своему вассалу. Тот не сумел закрепиться на новых землях и вскоре был вынужден продать их. Несколько веков поместье переходило из рук в руки, пока в 1679 году его не получила семья Герберт. Через сто лет Генри Герберт стал первым графом Карнарвон. Он перестроил поместье по моде своего времени, разбив вокруг замка большой пейзажный парк с озерами. Третий граф Карнарвон занялся отделкой дома, снова перестроив его по викторианской моде. Именно этот облик дом сохранил до наших дней. Для перестройки замка он нанял архитектора Чарльза Барри, впоследствии строившего Вестминстерский дворец. Чарльз Барри был большим поклонником стиля, который он назвал «англо-итальянским», сочетавшего немеркнущую красоту построек итальянского Ренессанса и пышность английского Ренессанса времен короля Якова I и королевы Елизаветы. Именно в этом стиле он и строил замок Хайклер, отдав должное не только внешней красоте, но и внутреннему комфорту, который так ценили елизаветинцы.
Замок Хайклер — основное место съемок телесериала «Аббатство Даунтон». Расположен в графстве Беркшир к югу от Ньюбери. Это родовое гнездо семьи Карнарвонов с 1679 года
Все шестьдесят спален замка и его многочисленные комнаты: будуары, парадная столовая, гостиная, библиотека, кабинеты, и т. д. были отделаны со всей возможной роскошью. Внутренняя отделка замка была завершена в 1878 году. Знаменитый английский политик XIX века лорд Дизраэли по достоинству оценил замысел Карнарвонов, воскликнув при виде Хайклера «Как живописно!».