Граф Дмитрий Николаевич был тяжел на подъем и не любил выезжать из дому с визитами, что отмечали все знавшие его. Однако в некоторых случаях визиты были обязательны, и он нашел такой выход. По рассказам сына, «…все швейцары были его знакомцы. По принципу отец находил необходимым расписываться во всех дворцах, но прибегал к особому приему, пользуясь сочувствием швейцаров. Ему приносили все книги на дом, и он преспокойно расписывался, сидя дома..».
В первой половине 1850-х годов Фонтанный дом «выпал» из великосветской жизни столицы. Здесь текла своя жизнь.
Граф Д.Н. Шереметев по складу характера не был коллекционером и довольно редко покупал произведения искусства. В шереметевском архиве имеется, например, донесение в Главную контору архитектора Корсини, датированное 5 декабря 1853 года: «…По приказанию Его Стятельства Графа выбрал я на выставке Общества поощрения художеств… пять картин, которые и помещены в Фонтанном доме. Цена сим картинам назначена самим Обществом, и следует выдать комиссионеру господину Прево 875 рублей».
Далее в рапорте названы эти приобретенные полотна и указана их стоимость. Среди них четыре произведения художника Чернецова – «Вид города Каира» за 300 рублей, «Вид Юрьевца на Волге» за 150 рублей, «Караван судов на Волге» за 150 рублей и «Место обретения Креста Господня в Иерусалиме» за 75 рублей, а также «Вид на Ладоге» работы Лагорио стоимостью 200 рублей. 30 мая 1855 года граф Шереметев приказал Главной конторе: «Его превосходительству господину титулярному советнику Дмитрию Михайловичу Обрескову за купленную мною мраморную статую Венеры предоставляю конторе заплатить 12 тысяч рублей серебром, из коих 2 тысячи доставить ныне, а остальные 10 тысяч в течение 5 лет, с 1856 года по 2 тысячи серебром ежегодно». Эта статуя, судя по фотографиям 1929 – 1930 годов, украшала Гостиную.
Пополнялась и библиотека. Хотя граф С.Д. Шереметев и писал, что отец газет не читал, документы свидетельствуют о том, что по его приказанию осуществлялась подписка на наиболее популярные из издававшихся тогда газет и журналов. Так, некий Попов, столоначальник Главной конторы, доносил 23 декабря 1853 года: «…Для Вашего Сиятельства сделана подписка на газеты и журналы на 1854 года, стоит:
Библиотека для чтения – 16.50; Отечественные записки – 17.00; Современник – 16.50; Пантеон – 16.50; Художественный листок – 12.00; Санкт-Петербургские ведомости – 16.00; Русский инвалид – 15.85; Нувелист, 3 экземпляра – 34.50; Журнал для детей – 6.00, а всего 150.85 рублей серебром».
Граф С.Д. Шереметев в своих воспоминаниях рисует такую картину жизни дома, относившуюся к тому времени: «…Близ отцовского кабинета в передней и лестнице малого подъезда с утра появлялись разные личности, домашние и пришлые, кто по делу, кто с просьбой, кто по привычке. Неизменно появлялся дворецкий Василий Иванович Сивков… степенный и важный старик, он навещал ежедневно меня и сообщал потом отцу о моем здоровье. Тут и камердинер Евграф Семенович Кравцов с помощниками, секретарь, конторские чины, портной Гробе, зубной врач Гиршфельд, подлекарь Васильев, Андрей Кузьмич (важное лицо в доме, смотритель Образной. –
О некоторых домочадцах и окружавших графа людях нужно сказать особо.
Граф Дмитрий Николаевич всегда ценил хороший стол и хорошие вина, любил принимать гостей и угощать. С 40-х годов у него служил поваром француз Жан-Поль Дюссо. Его брат содержал известный в столице ресторан на Большой Морской улице.
Среди управляющих особого разговора заслуживает Прокофий Григорьевич Суслов, один из самых даровитых шереметевских служащих. Он происходил из крепостных села Иваново и служил управителем Московского дома. Суслов сумел дать хорошее образование сыну и двум дочерям. Василий Прокофьевич Суслов стал юристом. Надежда Прокофьевна Суслова получила медицинское образование за границей, в Цюрихе, и стала одной из первых в России женщиной-врачом, защитила в 1867 году докторскую диссертацию. Ее первым мужем стал доктор Федор Федорович Эрисман, швейцарец по происхождению, основоположник научной гигиены в России. Другая дочь, Аполлинария Прокофьевна Суслова, слушала лекции в Петербургском университете, но более всего она известна литературоведам той противоречивой ролью, которую она сыграла в жизни Ф.М. Достоевского в 1860 – 1870-е годы, а затем, в 1880-х, стала первой женой Василия Васильевича Розанова, видного русского философа.