И так продолжалось вплоть до отмены крепостного права. В процессе освобождения крестьян многие старинные дворянские семьи не выдержали крупного перелома, совершившегося после освобождения крестьян. Их материальное положение пошатнулось, и многие даже вынуждены были расстаться со своими имениями. Но в наиболее сложном материальном положении оказались именно такие крупные помещики, как граф Шереметев. Во-первых, сам процесс оформления всех необходимых формальностей при таком огромном числе освобождаемых крестьян занимал много времени. Во-вторых, крестьяне получали свободу и земельный надел после составления и утверждения Уставных грамот, а выкупные платежи за полученные наделы крестьяне выплачивали помещику с рассрочкой, через Крестьянский банк, в течение последующих двадцати пяти лет. Легко представить, какие бреши этот процесс нанес бюджетам крупных помещиков, и как непросто им приходилось привыкать жить в новых экономических условиях.
Благосостояние помещиков в значительной степени зависело от управляющих, от их хозяйственных талантов, от их честности. Главноуправляющий имениями графа Шереметева сенатор Иван Федорович Апрелев был человеком безукоризненной честности, во многих своих пристрастиях сходившийся с графом Шереметевым. Но он оказался совершенно беспомощным в новых условиях, ему стало трудно твердой рукой управлять таким сложным хозяйством, какое представляла собой графская Главная контора. После Крестьянской реформы 1861 года его собственное материальное положение стало стремительно ухудшаться, и в конце концов он потерял свое старинное родовое имение недалеко от Тихвина. В 1862 году на его место в качестве главноуправляющего приглашается князь Федор Михайлович Касаткин-Ростовский, дальний родственник графа Дмитрия Николаевича: прабабкой его была княгиня Екатерина Борисовна Урусова, младшая из дочерей фельдмаршала Б.П. Шереметева. Князь Касаткин-Ростовский воспитывался на средства графа Дмитрия Николаевича, в молодые годы служил в одном из армейских гусарских полков. После выхода в отставку князь назначается вторым помощником главного смотрителя Странноприимного дома. По рекомендации людей, которых он уважал, и с согласия графини Александры Григорьевны граф Д.Н. Шереметев решился вверить ему свои дела. В помощь князю пригласили Эдуарда Николаевича Кантемирова, контролера и кассира Главной конторы. В семидесятые годы им пришлось немало потрудиться над тем, чтобы максимально безболезненно для благосостояния графской семьи и без особого ущерба для бюджета Странноприимного дома и других благотворительных дел провести необходимые юридические процедуры.
О характере отношений помещика графа Д.Н. Шереметева и его крестьян рассказывал его сын. После оглашения Манифеста 19 февраля 1861 года об освобождении крестьян в столицу стали съезжаться депутации от крестьянских обществ «для изъявления благодарности и верноподданнических чувств» государю. Шереметевские крестьяне «…яви лись к отцу с настоятельной просьбой самому вести их к государю – что без него они не желают подносить хлеба-соли и отделять себя от него в такую знаменательную и торжественную минуту. Отца это заявление очень порадовало и утешило… В назначенный день отец отправился во дворец во главе крестьянской депутации… и это появление отца с крестьянами, видимо доставило, удовольствие государю. Он обласкал крестьян и указал на тесную и живую связь их с такими помещиками, каким был мой отец».
Музыка в Фонтанном доме
На протяжении всей жизни, а во второй ее части в особенности, музыка помогала графу Дмитрию Николаевичу обрести гармонию и отчасти душевный покой. Многие люди, знавшие его, говорили о том, что он от природы был очень музыкален, его сын утверждал, что любовь к музыке была у его отца наследственная, он имел врожденное музыкальное чувство, абсолютный слух и неплохой голос и что в молодости он иногда даже позволял себе петь в обществе.
После смерти графини Анны Сергеевны прекратил свое существование в Фонтанном доме музыкальный салон. Лишь иногда, как вспоминал сын, «…бывали у отца музыкальные вечера, квартеты, и он очень любил виолончелиста Шуберта. Одно время он желал, чтобы Шуберт сделался моим преподавателем… Конечно, на этих вечерах неизбежен был Ломакин. Из дам бывали Екатерина Владимировна Родзянко, отличная пианистка, фрейлина, дочь начальницы Екатерининского института, и фрейлина Прасковья Бартенева, у которой был прекрасный голос».
Особую известность Фонтанному дому при графе Дмитрии Николаевиче принесла его хоровая капелла. Граф Сергей Дмитриевич писал, что «…отец всегда любил музыку, особенно церковную, и поддержал существовавший еще при деде хор певчих, которым в XVIII веке управлял Дехтярев (sic), современник и друг Бортнянского; оба они одновременно посетили Италию… На Фонтанке, неподалеку от Фонтанного дома, был дом семейства Дубянских, любителей хорового пения, особенно церковного, у них был свой хор, и их влиянию отец обязан развитием музыкального вкуса».