Растрелли начинал свою деятельность в Петербурге еще в начале 1720-х гг. – первое самостоятельное дворцовое здание зодчий проектировал по заказу господаря Валахского князя Дмитрия Кантемира, постройка занимала участок в конце Миллионной улицы и не сохранилась до нашего времени. В истории осталась любопытная характеристика молодого архитектора, данная Антиохом Кантемиром: «Граф Растрелли родом итальянец, в российском государстве искусный архитектор; за младость возраста не столько в практике силен, как в вымыслах и чертежах. Инвенции его в украшении великолепны, вид здания его казист; одним словом, может увесилиться око в том, что он построит».
Третьим Зимним дворцом Растрелли занимался уже в 1730-х гг. – государыня-императрица Анна Иоанновна поручила мастеру реконструкцию и объединение нескольких зданий на набережной Невы. Все бы хорошо, но Растрелли понимал, что необходим новый проект главного дворца Империи, величественный и достойный «славы Всероссийской». В 1753 г. появляется проект четвертого Зимнего дворца, строительство которого завершат другие архитекторы, без участия самого автора, в 1762 г. На время строительства Растрелли сооружает временный деревянный Зимний дворец и как раз на углу набережной реки Мойки и Невской перспективы, на участке сгоревшего Гостиного двора.
«План новобудущему на каменном фундаменте деревянному Зимнему дворцу, который имеет быть построен на Адмиралтейской части близь Зеленого мосту и на Невской перспективе на месте Гостиного двора и на той площади, что к Адмиралтейскому лугу» Елизавета Петровна подписала 29 декабря 1754 г., и строительные работы начались весной, как только это стало возможным – Растрелли представил проект в начале февраля, а императрица подписала его 6 марта. Работы здесь продолжались недолго, и 5 ноября 1755 г. императорская фамилия торжественно въехала в деревянный Зимний дворец Растрелли.
«Санкт-Петербургские ведомости» по этому поводу сообщали: «Прошедшего воскресения в 7-м часу пополудни изволили е. и. в. из Летнего дворца перейти в новопостроенный на Невской перспективе деревянный Зимний дворец, который не токмо по внутреннему украшению и числу покоев и зал, коих находится более ста, но и особливо потому достоин удивления, что с начала нынешней весны и так не более, как в 6 месяцев, с фундаментом построен и отделан». Временный дворец действительно поражал своими объемами. Кроме ста пятидесяти шести комнат, в число которых входил и большой Тронный зал, архитектор предусмотрел ряд парадных залов, большую Светлую галерею, приемные и каменные погреба. Отделка парадных помещений была великолепна: штучные наборные паркеты из дуба, клена и ореха, лепные золоченые орнаменты стен и живописные плафоны на потолках. В Светлой галерее интерьеры украшали двадцать картин в посеребренных рамах. Личные покои императрицы располагались со стороны реки Мойки, а окна комнат великого князя и его супруги выходили на Луговую улицу. Парадный подъезд дворца располагался у Зеленого (Полицейского) моста.
В историю Санкт-Петербурга да и всей страны этот временный дворец вошел тем, что стал последним местом пребывания императрицы Елизаветы Петровны. Государыня скончалась здесь 25 декабря 1761 г., так и не дождавшись завершения строительства каменного Зимнего дворца на набережной Невы.
Недолго простояла грандиозная постройка знаменитого архитектора – в феврале 1767 г. ее разобрали, освободив землю для нового строительства. Интересно, что один из флигелей дворца перевезли в Красное Село, где он простоял до прошлого столетия.
Так обстояло дело до появления на месте Гостиного двора и деревянного Зимнего дворца жилого дома Чичерина, возведением которого в 1768–1771 гг. занимался известный архитектор Юрий Матвеевич Фельтен.
История строительства дома для петербургского генерал-полицеймейстера окружена множеством тайн, и, в частности, доподлинно не установлен автор проекта здания.
В этой связи имя Фельтена упоминается чаще других, хотя документальных подтверждений пока нет. Здесь же вспоминается его работа с Растрелли над возведением Зимнего дворца, с фасадами которого перекликается внешний вид дома Чичерина.
Среди возможных авторов проекта называются также имена двух других петербургских зодчих: Александра Филипповича Кокоринова и Жана-Батиста Мишеля Валлен-Деламота. Постройки этих двух мастеров, а выделить здесь можно здание Императорской Академии художеств и Малый Зимний дворец, еще несут на себе «последние следы барочного духа», что наблюдается и в решении фасадов дома Чичерина.
Генерал-полицеймейстер прожил в доме до своей кончины в 1782 г., а следующим владельцем столь примечательной недвижимости стал его старший сын – вице-полковник Кирасирского полка Александр Николаевич Чичерин.