Он не стыдился своих родных, несмотря на всю их простоту. Одну из своих сестер, Авдотью, он назначил фрейлиной, а из брата Кирилла, отправленного заграницу, где ему дали самое тщательное образование, он сделал человека, стоящего на дороге ко всем почестям.
Когда в 1744 году Елизавета пробыла две недели в Козельце, близ Лемеш, он позаботился, чтобы его родня не надоедала ей. Он собирал их в доме, выстроенном им в родном селе, и там предавался с ними семейным излияниям.
Не забыл он и своего первого учителя, дьячка в Лемешах, хотя ему с трудом удалось удовлетворить его честолюбие. Во время посещения дома бывшего гофмаршала Левенвольда Елизавета с изумлением увидела, как фаворит бросился на шею дворецкому и сталего целовать.
— Да вы в своем уме? — спросила она.
— Это мой старый друг! — растроганным голосом отвечал Разумовский.
Произведенный в фельдмаршалы в 1757 году он сказал императрице:
— Лиза, ты можешь сделать из меня что хочешь, но ты никогда не заставишь других считаться со мной серьезно, хотя бы как с простым поручиком!
Он был нрава насмешливого, хотя и без тени злобы, и обладал собственными очень широкими философскими воззрениями, полными снисходительной и иронической беспечности.
Не любя игру и относясь равнодушно к выигрышу, среди богатства, которым он был засыпан, он держал банк, чтобы доставить удовольствие своим гостям, и позволял грабить себя без стеснения, причем гости мошенничали, играя в карты, либо просто набивали карманы золотом, валявшимся на столах.
Алексей Григорьевич был бы образцовым фаворитом, если бы не его чрезмерное пристрастие к вину. Он предавался этой страсти обыкновенно на охоте, и тогда, забывая свою доброту, шел по следам отца и давал волю своему гневу.
Алексей Григорьевич не вмешивался в политику. Однако одно пребывание его около Елизаветы от 1742 до 1757 года имело огромное значение, поскольку именно он поддерживал Бестужева.
Иногда он поддерживал и интересы церкви, и в силу своего положения, оказывался замешанным в борьбу политических партий. Потому его имя постоянно примешивается к процессам и кровавым событиям данного царствования.
Вследствие его положения, как предполагаемого супруга Елизаветы, наследники императрицы и их приверженцы смотрели на него подозрительно.
Когда дом, где великий князь и великая княгиня жили в Гостилицах, провалился по вине архитектора, владелец Гостилиц был заподозрен в составлении заговора. В результате нехороших слухов у судей и палачей появилось много работы.
Если верить тому, что брак Елизаветы и Алексея Разумовского на самом деле имел место, то возникает естественный вопрос: имелось ли потомство от этого брака?
Достоверно известно только то, что граф Алексей Григорьевич Разумовский умер бездетным. Тем не менее, слухи о детях Елизаветы и Разумовского ходили по всей России. Говорили, что у Елизаветы от Разумовского родились сын и дочь, два сына и дочь, две дочери и сын.
По поводу сына Елизаветы и Разумовского, князе Тараканове, ходили слухи, что этот «князь» всю свою жизнь провел в одном из монастырей Переяславля-Залесского, сетуя на свою несчастную судьбу, и умер в начале XIX века.
По другой версии, фамилия его была Закревский, он сделал себе блестящую карьеру в Петербурге, став тайным советником и президентом медицинской коллегии.
Но, конечно, самой романтичной легендой стала судьба княжны Таракановой — дочери Елизаветы и Разумовского. В этой легенде переплелись истории, по крайней мере, двух женщин, выступавших под этим именем.
Одна из них, Августа Тараканова, более известна под именем инокини Досифеи, вторая — легендарная красавица Елизавета Тараканова, запечатленная на знаменитой картине Г. Флавицкого «Княжная Тараканова».
Но этим количество «княжон Таракановых» не исчерпывалось. Молва утверждала, например, что в нижегородском посаде Пучеж долгое время жила и в 1839 году умерла дочь императрицы Елизаветы Петровны и графа Разумовского, известная под именем Варвара Мироновна Назарьева.
Большую часть своей жизни она прожила инокиней при Пушавинской церкви Пучежа, пользуясь большим уважением жителей.
Таинственная монашка, известная как «княжна Тараканова», жила отшельницей и умерла в московском Никитском монастыре в начале XIX столетия.
Предания о «дочери Елизаветы и Разумовского» рассказывали в женских монастырях Арзамаса, Екатеринбурга, Костромы, Нижнего Новгорода и Уфы — сюда в разное время привозили на жительство загадочных женщин, «принадлежавших к высшему сословию». Как правило, эти женщины были «умалишенными», что не мешало народной молве окружать их всевозможными легендами.
Почему дочь Елизаветы и Разумовского получила фамилию Таракановой, достоверно неизвестно. Предполагали, что происхождение фамилии связано с местом рождения графа Разумовского — слободой Таракановкой (никогда в реальности не существовавшей).
Другие исследователи считают, что фамилия Тараканова произошла от искаженной фамилии Дараган: известно, что родная сестра графа А. Г. Разумовского Вера Григорьевна была замужем за казачьим полковником Е. Ф. Дараганом.