По версии некоторых исследователей, автором таинственного дома на Маросейке является ученик В. Баженова — Матвей Казаков. Его чертеж включен в первый из Казаковских альбомов и не входит в число домов, отмеченных самим Казаковым, как постройки учеников, и тем более Баженова. В первый альбом Казаков вносил те строение, которые стоил сам. На его авторство указывает сходство планов румянцевского дворца с его собственным домом. До сих пор ведутся споры, кто же является его автором, и как всегда бывает в таких случаях, в спор включается народная молва. По слухам, роскошный бело-голубой дворец был выстроен крепостными графа Румянцева в знак особой любви к своему «хорошему» барину.
Знаменитый полководец родился в старинной дворянской семье. Его мать Мария Андреевна — внучка боярина Артамона Сергеевича Матвеева, начальника Аптекарского, Стрелецкого и Посольского приказов, жившего по соседству в роскошной усадьбе на месте нынешнего дома № 7 в Армянском переулке. Его называли первым министром царя. Во многом благодаря Матвееву состоялось присоединение Украины к России в 1654 году. Позднее Матвеев возглавил и Малороссийский приказ, давший имя улице Маросейке.
Артамон Матвеев
Мария Андреевна Матвеева
Не без влияния своей супруги-шотландки (урожденной Гамильтон) боярин стал активным сторонником культурного сближения России с Западной Европой. Его дом был убран на европейский манер: потолок украшен живописью, на стенах висели картины и часы, водились книги, гостей ублажали органы и скрипки. Именно в этом доме на радость всем кокеткам появились первые в Москве настенные зеркала. По обычаю дома, женщины сидели вместе с мужчинами за одним столом и вели с ними неторопливую беседу.
По преданию, именно в доме Артамона Матвеева, овдовевший царь Алексей Михайлович увидел однажды за ужином его юную воспитанницу Наталью, влюбился в нее с первого взгляда и пообещал найти достойного жениха, который не гнался бы за приданым. Но…вскоре объявил Матвееву, что нашел самого лучшего жениха, и попросил руки возлюбленной. Артамон Матвеев упросил государя «не гневить бояр» и провести традиционные царские смотрины, чтобы все видели, как он сам выбрал себе невесту. 27 апреля 1670 года в Теремной дворец свезли самых красивых девиц, и Алексей Михайлович «выбрал» свою возлюбленную — Наталью Кирилловну Нарышкину, которая вскоре родила ему сына Петра — первого императора и самодержца Российского.
Отцом будущего полководца официально считался генерал-аншеф Александр Иванович Румянцев, сподвижник Петра I, участник
всех важнейших сражений. Однако молва того времени считала Петра Александровича сыном самого Петра Великого. По воспоминаниям современников, красота, живость и грациозность юной Машеньки обратили на себя внимание Петра I, который увлекся ею, а Матвеева, по ее собственному признанию, не была «противницей его желаний». Она заняла первое место среди любовниц любвеобильного императора. В 19-летнем возрасте выдана замуж за денщика Петра I Александра Румянцева. Петр I дал за невестой богатое приданое, жених получил чин бригадира. В 1844 императрица Елизавета Петровна пожаловала Румянцеву в статс-дамы и удостоила особым поручением — заведовать двором невесты наследника престола принцессы Анхальт-Цербстской Софьи Фредерики Августы (будущей императрицы Екатерины II).
Крестник императрицы Екатерины I, Петр Александрович уже в шесть лет был зачислен в полк. Дома его обучали грамоте и иностранным языкам, а в 1739 году причислили к российскому посольству в Берлине. Тут вырвавшийся из-под строгого отцовского надзора молодой граф окунулся в «удалую жизнь», проявил свой бурный характер, прославившись безудержным мотовством, и вскоре был отозван в Петербург для продолжения учебы в Шляхетском корпусе.
В столице он продолжал так компрометировать отца своим поведением, что тот отослал его в далекий полк в Финляндию. Его проказы так донимали отца, что тот с горечью писал: «Мне пришло до того: или уши свои зашить и худых дел ваших не слышать, или отречься от вас…». После смерти отца в 1749 году молодой граф переменился, посерьезнел и выдвинулся в число лучших командиров. Он стал любимцем Петра III, генерал-аншефом, кавалером высших орденов. При Екатерине II был назначен генерал-губернатором Малороссии и оставался им в течении 30 лет. Суворов А.В. считал его своим учителем.
Во время официального празднования в Петербурге победы над турками Петр Александрович получил фельдмаршальский жезл, почетный титул — Задунайский, осыпанные алмазами звезду ордена Андрея Первозванного, лавровый венок и масличную ветвь и, по обычаю тех времен, пять тысяч душ крестьян. В честь его побед возведены обелиски в Царском Селе и Санкт-Петербурге. По наследству в 1797 году дом прославленного генерал-фельдмаршала перешел к его сыну — известному государственному деятелю, канцлеру при дворе Александра I, дипломату, графу Николаю Петровичу Румянцеву.