Потеряв сына, обезумевший от горя Михаил запил. Поговаривали, что его новая жена Верка, «змея подколодная», умышленно спаивала своего мужа вместе со своим возлюбленным доктором Павлиновым. Желая овладеть хлудовскими деньгами, любовники состряпали документ, что Хлудов-де болен белой горячкой: припомнили даже случай, когда на выставке собак в Манеже муженек забрался со своей тигрицей в клетку и оба, грозно скалясь, рычали на публику. Вскоре Хлудов умер в сумасшедшем доме, а тигрицу Машку определили в зоологический сад, где она зачахла от тоски по хозяину.
Михаил Хлудов и его родные завещали колоссальные деньги на благоустройство Москвы и оставили после себя немало добрых дел. Они открывали и содержали учебные заведения, больницы и богадельни, палаты для неизлечимо больных и дома бесплатных квартир. Одной из самых известных благотворительниц в Москве была родная сестра Михаила Варвара Алексеевна Хлудова. В молодости она была насильно выдана замуж за богатейшего купца Абрама Морозова, несколько лет добивавшегося ее руки. Три раза она отказывала ему, тогда отец запер ее в комнате, и она почти год просидела взаперти. В это время, доведенный до предела кутежами сына Михаила, Алексей Иванович выгнал его из дому, лишив наследства. Варвара решилась на отчаянный поступок: вышла замуж за нелюбимого, поставив лишь одно условие, чтобы отец простил ее любимого брата.
Сестра Михаила Варвара, в замужестве Морозова, была одной из самых известных благотворительниц в Москве
После 12 лет супружеской жизни ее муж заболел психически и умер, оставив ее молодой вдовой с тремя сыновьями, ткацкой мануфактурой в Твери и многомиллионным состоянием. Варвара Алексеевна в память о супруге передала часть своего состояния на строительство психиатрической клиники на Девичьем поле. Почти в то же время ею был создан институт для лечения раковых опухолей, в память о матери, умершей от рака. В Твери на фабрике ею были устроены театр, больница, школа, ясли, приют, которые существовали на ее средства. Перед смертью Варвара Алексеевна все паи завещала рабочим на улучшение их бытовых условий, но грянула октябрьская революция. К власти пришли новые хозяева жизни, которые объявили Варвару Хлудову хитрой предпринимательницей, которая своей благотворительностью пыталась «завуалировать свою эксплуататорскую деятельность».
По воспоминаниям Н. А. Варенцова, бесчинства Хлудова в «Стрельне» повторил бывший приказчик, Михаил Павлов из Шуи. Став текстильным фабрикантом, он на радостях разбушевался и срубил толстым поварским ножом большую пальму в уникальном зимнем саду. И на глазах компаньонов отдал Натрускину в качестве компенсации 5 тысяч рублей.