В этом доме в 1812 году родился писатель и публицист Александр Иванович Герцен (1812–1870), внебрачный сын крупного помещика И.А. Яковлева, брата владельца дома сенатора A.A. Яковлева. Булгаков поменял одного писателя (Герцена) на другого (Грибоедова).
Особняк был построен в 1889 году по заказу князя Святополк-Четвертинского по проекту московского архитектора Н.С. Бойцова. Особняк выполнен в стиле модерн романтического направления. Два этажа, башенки, резное дерево, огромный зал, в котором, по преданию, размещалась влиятельная масонская ложа, а потом знаменитый писательский ресторан.
Сам ЦДЛ был основан в 1934 году — в год проведения первого съезда советских писателей и образования Союза писателей СССР. На открытие было приглашено 100 руководящих партийных работников, членов правительства СССР, заслуженных деятелей искусства.
С самого начала были предусмотрены членские взносы. Вступительный — пять рублей, ежегодный — пятнадцать. Суммы взносов неоднократно менялись, понятно, в сторону увеличения.
ЦДЛ сразу стал писательским клубом, где встречались друзья и враги, звучали застолья, проходили заседания, панихиды, собрания — «чистки» неугодных элементов или награждения достойных.
О писательском Доме за 70 лет создано неисчислимое количество легенд. Некоторые из них относятся аж к дореволюционному (до 1917 года) времени.
Например, знатоки утверждали, что в обшитом дубовыми панелями ресторанном зале, где во времена «проклятого» прошлого дислоцировалась масонская ложа, однажды прошел бал, на котором танцевала реальная Наташа Ростова из «Войны и мира». Некоторая несогласованность во времени для легенды не помеха.
Доподлинно известно, что вскоре после постройки дом на Поварской купила графиня Александра Андреевна Олсуфьева. Она прожила здесь до 1917 года, пока «революционный ураган» не унес ее в Европу.
Дом Олсуфьевых славился на всю Москву французским поваром и винным погребком. Об этой традиции, сохранившейся в ресторане МАССОЛИТа, кормить совписов барскими блюдами Булгаков упоминает с особым смаком — ведь обычному гражданину подобные яства и не снились. Советских литераторов — сообщество избранных, ангажированных властью лизоблюдов, травивших Булгакова из года в год, он ненавидел всей душой, потому и позволил себе удовольствие спалить Грибоедов в главе «Последние похождения Коровьева и Бегемота».