С большим уважением пишет о Софье Андреевне и вдова Достоевского — Анна Григорьевна: «Это была женщина громадного ума, очень образованная и начитанная. Беседы с ней были чрезвычайно приятны для Федора Михайловича, который всегда удивлялся способности графини проникать и отзываться на многие тонкости философской мысли, так редко доступной кому-нибудь из женщин». Но Софью Андреевну наряду с выдающимися умственными способностями и энциклопедической образованностью отличали душевная тонкость и сердечная отзывчивость. Так, узнав о том, что Ф. М. Достоевский очень любит «Сикстинскую Мадонну» Рафаэля и огорчается, что не может достать хорошей репродукции этого произведения, Софья Андреевна выписала из Дрездена фотографию «Мадонны» в натуральную величину и подарила ее писателю. Эта фотография была повешена над постелью Достоевского. «Сколько раз в последний год жизни Федора Михайловича я заставала его стоящим перед этою великою картиною в таком глубоком умилении, что он не слышал, как я вошла…» — вспоминала Анна Григорьевна Достоевская. «Сикстинскую Мадонну» можно и сегодня увидеть в Доме-музее Достоевского на том же месте, что и при жизни великого писателя.
Скончалась Софья Андреевна Толстая в 1892 году в Лиссабоне (муж С. П. Хитрово был русским посланником в Португалии, и Софья Андреевна гостила у него). В. С. Соловьев писал М. Стасюлевичу: «Получил из-за границы поручение к Вам. Покойная графиня Толстая желала быть погребенной в Красном Рогу, в приготовленном для нее месте рядом с Алексеем Константиновичем. Перевозка гроба из Лиссабона даже морем стоит не менее 1500 рублей. Племянница покойной, С. П. Хитрово, писала Вам, прося, если возможно, авансировать ей эту сумму в счет будущей продажи сочинений Ал. Толстого, право на которое (вполне или отчасти — не знаю) перешло к ней». Желание Софьи Андреевны было выполнено, и она покоится рядом со своим мужем…
Не только в любви, но и в дружеских, просто приятельских отношениях Алексей Константинович являл собой пример высокого благородства. Видимо, поэтому современники, знавшие его, оставили о нем немало добрых воспоминаний. «Подобной ясной и светлой души, такого отзывчивого и нежного сердца, такого вечно присущего в человеке высокого нравственного идеала, как у Толстого, я в жизни ни у кого не видел», — вспоминал князь А. В. Мещерский. О молодом Алексее Константиновиче В. А. Инсарский писал: «Нежность и деликатность настолько проникали всю его фигуру, что он похож был на красную девицу». А. А. Фет называет его «милейшим, образованнейшим и широкописным». Отношение же самого Алексея Константиновича и к окружающим его людям, и к давно умершим, о которых он составил себе впечатление на основании их творчества или их биографий, определялось теми внутренними, глубинными качествами этих людей, которые он улавливал и делал из них выводы в соответствии со своими требованиями к человеку. Так, он пишет племяннику жены: «Ты слаб, но душа твоя в высшей степени честна. Я не боюсь за тебя, я верю тебе; ты можешь по слабости поступить дурно, но ты не сделаешься равнодушен к добру и уму, к правде и неправде». Или вот он пишет Софье Андреевне о Шопенгауэре и Гёте. Шопенгауэр — «пакостный, маленький, мстительный и злой», а «Гёте, кажется, постоянно сам себе удивляется и перед собой благоговеет, но мне гораздо лучше нравится самоуважение Шопенгауэра; мне кажется, что с Шопенгауэром я бы ужился, а с Гёте — нет». Еще показательнее его отношение к герою тургеневского романа «Отцы и дети» — ведь Толстой был непримиримым противником нигилизма: «…Если бы я встретился с Базаровым, я уверен, что мы стали бы друзьями, несмотря на то, что мы продолжали бы спорить». Терпимость, деликатность не позволяли ему выказывать раздражение, если кто-то из знакомых и вызывал его. Так, неизменно учтив, приветлив был он с Каролиной Павловой, хотя она частенько и раздражала его. При этом не следует забывать, что если он в чем-то принципиально расходился с человеком, то не говорил об этом у него за спиной, а всегда предпочитал открытое выяснение отношений, однако никогда не переходил на личности, ограничивая разговор учтивым спором по существу разногласий.