Не дав Разумовскому отставки, император завел привычку каждый вечер посещать графа в его огромном Аничковом доме, чтоб выкурить трубку и по-приятельски выпить пива с вдовцом своей тетки. Ему даже не приходило в голову, что Алексей Григорьевич не в восторге от таких визитов. И дело не в том, что граф не курил табака, а пиву предпочитал «сладкие украинские водки». Пренебрежение к элементарным правилам приличия во время похорон покойной государыни и траура по ней в глазах современников выглядело как глумление над памятью Елизаветы. А этого Разумовский снести был не в силах. Возражать он не мог, но и видеть не желал. Поэтому Алексей Григорьевич снова и снова повторяет просьбу об отставке. Наконец, во время одного из приездов императора, граф подарил ему трость, украшенную драгоценными камнями, попросил принять миллион рублей и вновь завел речь о желании удалиться от двора. Манифест о вольности дворянства был уже подписан, и Петр вместе с дарами принял отставку Разумовского.
Алексей Григорьевич оказался первым из русских вельмож, кто сам, добровольно, оставил службу. Сделал он это очень мягко, не высказывая недовольства происходящим в стране, но недовольство подразумевалось уже в самом шаге. До появления Манифеста о вольности дворянства 1762 г. достойной отставки быть просто не могло. Речь шла только об опале и ссылке, часто сопровождавшейся конфискацией имущества. В 20-летнее спокойное царствование Елизаветы Петровны, благодаря религиозному обету императрицы, данному в ночь переворота, в России не действовала смертная казнь. Страх плахи и бесчестья уходил в прошлое, и вместе с чувством личной безопасности у дворянства появлялась уверенность в себе. Добровольная отставка такого знаменитого вельможи, как А. Г. Разумовский, была важным актом нового нарождающегося самосознания русского дворянского общества.
Граф не успел покинуть столицу до переворота 28 июня 1762 г., возведшего на престол Екатерину II. Его брат гетман Кирилл Григорьевич принял участие в заговоре, новая государыня заметно благоволила к семейству Разумовских. Теперь Алексей Григорьевич отправлялся в Москву не один, как рассчитывал, а в составе великолепного царского поезда. Ему предстояло играть заметную роль на коронации новой императрицы: нести корону во время обряда венчания на царство. Вряд ли, отправляясь на покой, пожилой вдовец Елизаветы Петровны думал, что вокруг его имени завернется одна из крупнейших политических интриг начала царствования Екатерины II.
На придворной сцене менялись действующие лица, иностранные кабинеты: Версаль, Вена, Берлин — боролись за влияние на Петербург. Одно оставалось постоянным — жестокое противостояние национальной и одной из иностранных партий. Теперь роль русской партии играла группировка Орловых, а их противников — Паниных — европейские дипломаты в донесениях называли «прусской» партией. Возвращенный Екатериной II из ссылки бывший канцлер Бестужев-Рюмин сблизился с Орловыми. Именно он осторожно поведал фавориту историю брака Елизаветы и Разумовского, надолго пресекшего иностранную «инфлуенцию» при русском дворе.
Орловы предприняли попытку склонить Екатерину II к официальному браку с Григорием Григориевичем. Екатерина не имела на русский престол законных прав, власть новой монархини основывалась на желании двора, гвардии и дворянского общества обеих столиц видеть императрицей именно ее. Но оно могло измениться, соверши Екатерина опрометчивый шаг. Предостерегая еще одного претендента на свою руку Станислава Понятовского от приезда в Россию, Екатерина писала ему 9 августа 1762 г.: «Пока я повинуюсь, меня будут обожать, перестану повиноваться — как знать, что может произойти».
В Москве императрице не замедлили дать это понять, как только бывший канцлер Бестужев-Рюмин стал собирать подписи не разъехавшегося еще после коронации дворянства под прошением о том, чтоб императрица вступила во второй брак. По старой столице поползли неодобрительные разговоры. Тайный брак Разумовского, о котором все знали, только придавал Алексею Григорьевичу всеобщее уважение, а в желании же Орлова венчаться открыто видели проявление непомерных амбиций и оскорбление императорского величия. Известная русская мемуаристка Е. П. Янькова (в девичестве Римская-Корсакова), молодость которой пришлась уже на самый конец XVIII столетия, записала раздраженные московские слухи о Г. Г. Орлове: «он метил очень далеко и уж чересчур высоко». Дело дошло до того, что с триумфальных ворот сорвали портрет императрицы, были раскрыты два офицерских заговора, имевших антиорловскую направленность.