Екатерина II самолично взялась устроить дальнейшую судьбу Воронцовой и приказала графу Р. И. Воронцову «выделить» дочь. Елизавета была негласно выслана в Москву, через секретаря своего, И. Елагина, Екатерина II купила для нее дом в Москве на свои личные деньги, проявив удивительную широту взглядов и заботу о бывшей сопернице.
Можно предположить, что простота и открытость (или тонкая дипломатичность) бывшей камер-фрейлины немало способствовали этому. Как говорят, чтобы не дать дальнейшего хода слухам и окончательно отстранить от общественной жизни некогда могущественную конкурентку, императрица Екатерина II взялась устроить и семейную жизнь опальной Воронцовой, «чтобы она уже ни с кем дела не имела и жила в тишине, не подавая людям много причин о себе говорить». В 1765 году Елизавета Романовна вышла замуж (или была выдана!) за полковника, затем и статского советника А. И. Полянского (1721–1818) и переехала в Санкт-Петербург, где и прожила до конца дней своих. Она не появлялась при дворе, но бывала в свете и виделась даже с близким другом Екатерины II графиней А. С. Протасовой.
Разумеется, такое «доверенное лицо» держало свою патронессу в курсе абсолютно всех деталей жизни опальной «мадам Помпадур». Протасовой был поручен надзор за всеми фрейлинами императрицы, слишком уж часто, как она считала, ее доверие обманывали легкомысленные завистливые девицы, которым она оказывала свое монаршее доверие. А слухи приписывают Протасовой еще одну весьма пикантную роль при Екатерине II, роль «дегустатора» фаворитов самой Екатерины.