Немало лет князь Николай Борисович провел за границей. Находясь в Париже, князь был нередко зван на вечера в Версаль. Людовик XVI и Мария Антуанетта были с ним в дружбе. Князь мог похвалиться дружбой и с прусским королем Фридрихом Великим, и с австрийским императором Иосифом II. В Европе князь Николай покупал предметы искусства и для Эрмитажа, Гатчины и Павловска, и для личного своего музея. За короткое время она пополняется западноевропейской живописью и скульптурой, оригинальными рисунками, редкими гравюрами, камеями, часами, табакерками, ценными книгами. Так, знаменитая библиотека Юсуповых насчитывала более 55 тысяч томов, среди которых – более 400 инкунабул.
К концу XVIII века в его коллекции были «Лежащая Венера», приписываемая Тициану, мужской портрет Веласкеса, парные портреты Рембрандта, картины Лоренцо Лотто, Доменикино, Тьеполо, ван Дейка и многих других. Итальянские и французские мастера, голландцы и фламандцы, англичане и немцы XVII–XVIII веков – вот основа галереи.
Княгиня Татьяна Васильевна Юсупова, урожденная Энгельгардт, жена князя Н. Б. Юсупова. Худ. Иоганн Баптист Лампи Старший
В 1793 году князь Николай женился на племяннице князя Потемкина, Татьяне Васильевне Энгельгардт, положившей начало знаменитой коллекции юсуповских драгоценностей. В ее коллекцию входили более 180 печатей на ониксах, сердоликах и других камнях. По словам современников, у Татьяны Васильевны Юсуповой была «женская слабость» – хорошие драгоценности.
Обратимся к воспоминаниям князя Феликса: «Княгиня была дельным человеком и думала о красе ногтей. Особенно любила украшения и положила начало коллекции, впоследствии знаменитой. Купила она брильянт „Полярная звезда“, брильянты французской короны, драгоценности королевы Неаполитанской и, наконец, знаменитую „Перегрину“, жемчужину испанского короля Филиппа II, принадлежавшую, как говорят, самой Клеопатре. А другую, парную к ней, говорят, царица растворила в уксусе, желая на пиру переплюнуть Антония. В память о том князь Николай велел повторить на холсте фрески Тьеполо из венецианского палаццо Лабиа „Пир и смерть Клеопатры“. Копии и ныне в Архангельском».
По слухам, Н. Б. Юсупов, будучи в Париже, принял эликсир вечной молодости и перестал стареть. И действительно, в 80 лет князь взял себе в наложницы юную крепостную балерину, которая родила ему двух сыновей. Неизвестно, сколько бы прожил любвеобильный князь, если бы не эпидемия холеры, от которой он и скончался. Узнав о смерти князя, в одном из писем Пушкин с горестью напишет: «Мой Юсупов умер».
С влиятельным князем связаны многие детские воспоминания А. С. Пушкина. С 1801-го по 1803 годы западную часть Юсуповских палат (флигель) снимал отец поэта – Сергей Львович. Дом, где жила пушкинская семья, сохранился, он был надстроен третьим этажом в 1891 году и тогда же соединен со старыми палатами. Сейчас он составляет крайнюю левую часть современного здания.
Напротив дворца был разбит знаменитый Юсупов сад, огороженный каменной стеной. Были здесь мраморные статуи, беседки, искусственные руины, «порфирные скалы», аллеи, затененные плющом, оранжереи, овальный пруд и изысканный фонтан на пересечении аллей. В саду рос огромный дуб, обвитый золоченой цепью, по которой поднимался вверх и спускался вниз огромный пушистый игрушечный кот с зелеными глазами, сконструированный голландскими механиками, при этом кот еще и разговаривал, но по-голландски, а из водоема поднимались фигуры богатырей. По семейному преданию, маленький Пушкин, гуляя в саду с няней, пообещал перевести рассказы кота на русский язык. Возможно, эти детские впечатления нашли свое отражение в поэме «Руслан и Людмила».
Из многочисленных детей Николая Борисовича в живых остался единственный сын Борис, тоже оставивший заметный след в истории России. Он имел придворную должность гофмейстера, отличался искренней заботой о бедных и привязанностью к своей красавице жене – Зиночке. По слухам, княгиня была вполне счастлива в браке, родила сына, потом дочь, которая вскоре неожиданно умерла. Слуги зашептались по углам, и страшная фамильная тайна дошла до ушей княгини. Узнав о языческом проклятии, прабабка легендарного Феликса Юсупова не пожелала мириться с судьбой и заявила мужу, что «плодить мертвецов» впредь не собирается, и предложила князю «удовлетворять свою ногайскую похоть с дворовыми девками».
Согласно преданию, после смерти дочери княгиня твердо решила обмануть Смерть: не спать с законным мужем, а если же умереть, то не от родового проклятия, а от любви. О головокружительных романах Зинаиды Юсуповой ходили легенды, но наибольшего шума наделало ее увлечение юным народовольцем. Когда того заточили в Шлиссельбургскую крепость, княгиня выкупила страстного любовника из тюрьмы и поселила его у себя во дворце. По слухам, когда возлюбленный умер, княгиня приказала забальзамировать его тело и поместить в тайной комнате, рядом со своей спальней.