Построенный в 1568 году на месте охотничьего замка дворец — прямоугольник с четырьмя башнями по углам и сухим рвом — напоминал крепость. Одна из его достопримечательностей — росписи юго-западной башни, посвященные аргосской царице Данае, которые исполнил архитектор, скульптор и живописец Гаспар Бесерра (1520–1570), знаменательны тем, что в XVI веке впервые были созданы испанским мастером, ранее декоративные работы в Испании поручали иностранцам. Во время пожара 1603 года, нанесшего большой урон дворцу, выгорел и сосновый бор, когда-то запечатленный на одной из старых гравюр. В XVII столетии резиденция Эль Пардо служила в основном временным пристанищем королевской семьи. Гравюра неизвестного мастера того же времени свидетельствует, что перед дворцом был разбит регулярный парк с партером из квадратных клумб и боковыми легкими арками типа пергол. По-прежнему леса Эль Пардо оставались излюбленным местом королевской охоты.
Хуан дель Масо, ученик, помощник и зять Веласкеса, заурядный живописец, послушно усвоивший приемы учителя, писал, помимо портретов, королевские охоты, загородные парки и даже испанские города. Исследователи, неустанно споря, приписывают некоторым работам Масо авторство самого Веласкеса. Особого внимания заслуживает полотно Лондонской Национальной галереи «Охота на кабана» в окрестностях Эль Пардо. Охота, подлинная страсть испанских монархов, оборачивалась тщательно подготовленным зрелищем на большой площадке, огороженной брезентовыми полотнищами с укрепляющими их кольями. На арену выгоняли зверей (кабанов, волков, медведей, оленей), и выезжавший им навстречу король в окружении вооруженных участников охоты демонстрировал свою меткость. Поблизости в каретах, от которых отпрягали лошадей, сидели королева и придворные дамы. В памфлете 1639 года, за который его автор знаменитый писатель Франсиско Кеведо жестоко поплатился тюремным заключением, в частности сказано, что средств, затраченных на такую охоту, вполне хватило бы, чтобы прийти на помощь осажденной крепости.
Долгое время лондонская картина приписывалась кисти Хуана дель Масо, и лишь после освобождения от потемневшего лака и записей может быть признана работой самого Веласкеса (впрочем, не все исследователи разделяют это мнение).
На переднем плане живописно расположилась большая толпа зрителей — жителей Мадрида и простых поселян. Королевская охота еще не началась, и в центре овальной площадки выстроилась кавалькада ее главных участников — молодцеватый всадник
Филипп IV, граф-герцог Оливарес, начальник королевской охоты и другие придворные кавалеры. Композиция включает до ста различных персонажей, что обусловило некоторую дробность общего впечатления и не всегда органичную связь близких и более дальних планов. Именно это обстоятельство может свидетельствовать об участии в создании картины Масо. Полотно выразительно своими деталями и изображением пейзажа — высоких песчаных холмов Эль Пардо, покрытых темным дубовым лесом. Оно интересно стремлением передать общую атмосферу парадного, театрализованного события, характерную для Мадрида тягу к зрелищной стороне жизни, в известной мере общую для верхов и низов общества.
В правление Карла III охотничьи угодья значительно увеличились, а сам дворец Эль Пардо был расширен почти вдвое усилиями неутомимого Сабатини, обладавшего исключительным мастерством достигать при разнообразии архитектурных элементов художественного единства образа. Многие испанские и иностранные художники и декораторы украшали обновленный дворец, среди них был молодой Гойя, создавший картины для шпалер дворцовой столовой.
В 1780-е годы участие Хуана де Вильянуэвы в строительстве ансамбля Эль Пардо проявилось в сооружении небольшого, но изысканного здания, названного Загородным домом Его Величества, но более известного как Дом принца, стоящего среди посадок самшита.
Несколько раньше в ансамбль Эль Пардо были включены владения конюшего и друга Филиппа V герцога дель Арко, дарованные его вдовой испанской короне. Небольшой дворец Ла Кинта дель Арко славился своими садами, которые на подъеме холма располагались террасами.
С 1940 по 1975 год в Эль Пардо жил генерал Франко. После реставрации 1983 года, в ходе долгих работ, когда внутренний двор был перекрыт застекленным потолком, дворец стал современной резиденцией для приема высоких официальных гостей. Перед фасадом дворца на обширном плоском пространстве разбит роскошный партерный сад с фонтанами и эффектными декоративными посадками.