Толстой принялся за свои воспоминания лишь во второй половине января 1903 г. 11 января 1903 г. он писал Черткову: «За время болезни хорошо думается, одно нехорошо, что невольно представляются нам новые завлекательные работы, а надо не забывать, что года и болезнь ведут к близкой смерти. Особенно занимали меня в эту болезнь (этому и содействовало чтение прекрасных записок Кропоткина) воспоминания для автобиографических заметок, обещанных Поше; особенно радостны детские и особенно мучительны безумные годы скверной жизни молодости. Хотелось бы всё рассказать» (т. 88).
Начало писания или, правильнее сказать, диктовки «Воспоминаний» относится, повидимому, к концу января 1903 г. В Дневнике Толстого 5 февраля 1903 г. записано: «Месяц не писал... За это время больше всего был занят своими воспоминаниями. Понемногу подвигаюсь. Но до сих пор — нехорошо». Далее 12 февраля: «В воспоминаниях немного подвинулся» (т. 54, стр. 154 и 155).
В этот первый период работы над «Воспоминаниями» была продиктована или написана большая часть их. Были продиктованы М. Л. Оболенской введение и главы I и II (о матери и деде); написаны собственноручно конец главы II (о жизни матери), глава III (об отце), большая часть главы IV (о бабушке), из которой только рассказ о слепом сказочнике Льве Степановиче был продиктован М. Л. Оболенской; первая половина главы V (о тетушке А. И. Остен-Сакен), вторая половина которой была продиктована М. Л. Оболенской, глава VI (о Т. А. Ергольской).
Это начало воспоминаний Толстой отдал 17 февраля 1903 г. дочери М. Л. Оболенской для передачи Бирюкову.
Получив копию «Воспоминаний», Бирюков включил их по главам в соответствующие места первого тома своей «Биографии Л. Н. Толстого» и в апреле 1903 г. переслал Толстому первые главы своей книги. В письме к Толстому 2 июня (нового стиля) 1903 г. Бирюков задал семь вопросов, относящихся к «Воспоминаниям». 3 июня 1903 г. Толстой отвечал Бирюкову: «Начинаю ответы на ваши вопросы. На первый вопрос: прочел ли я и одобрил ли, Таня [T. Л. Сухотина] вам отвечает совершенно верно. При этом считаю нужным вам заметить, что общее мое впечатление то, что вы очень хорошо пользуетесь моими записками, но что я избегаю вникать в подробности, так как такое вникание может завлечь меня в работу исправления, которой я не хочу, так что предоставляю всё вам, присовокупляя только то, что в своей биографии, цитируя места из моих записок, прибавить:
Теперь я занят другим и записок не продолжаю. Если буду жив, то когда возьмусь за них, что может быть очень скоро, очень много подвинусь.
1-й вопрос: пользоваться моими записками можете, сколько хотите;
2-й вопрос: продолжать намереваюсь, но едва ли кончу не только в год, но в два или три, следовательно, едва ли кончу до смерти.
3-й: Издавать отдельно при жизни не буду.
4) Дожидаться вам меня нельзя, если работа приурочена к полному, собранию.
5, 6, 7) Ваша работа мне не помешает, а скорее поможет» (т. 74).
Под впечатлением письма Бирюкова Толстой опять принялся было за свои воспоминания. 4 июня 1903 г. он записывает в Дневнике: «Нынче сел за работу: хотел продолжать воспоминания, но не мог: не берет» (т. 54, стр. 177).
Вероятно, в этот период работы Толстым было написано начало главы VI (правильнее — VII — см. описание рукописи № 5) — о гувернере Ф. И. Рёсселе, Дунечке Темяшевой и ее отце (рукопись № 5, л. 75).
После этого в работе над «Воспоминаниями» следует перерыв до 19 декабря, когда Толстой отметил в Дневнике: «Немного написал воспоминания, но, к сожалению, не продолжал. Нет охоты» (т. 54, стр. 200).
В этот раз было, повидимому, написано окончание главы VI (правильнее — VII) — о Дунечке Темяшевой и о покупке отцом Толстого имения Пирогово (см. рукопись № 6, лл. 96—97). Следующие даты писания «Воспоминаний» — 29 января и 8 февраля 1904 г. Даты эти не указаны в Дневнике Толстого, но они проставлены на обложках черновых рукописей. В этот раз, повидимому, было написано начало главы VII (правильнее — VIII) — о слугах в яснополянском доме.
В конце марта 1904 г. Бирюков послал Толстому законченный им вчерне первый том «Биографии». Извещая об этом Толстого в письме 9 апреля (нового стиля), Бирюков вместе с тем задавал ему ряд вопросов о событиях его жизни в молодости.
4 и 5 июня 1904 г. Толстой отметил в Дневнике свои неудачные попытки продолжать «Воспоминания» (см. т. 55, стр. 44—45).
По сохранившимся рукописям к этому периоду работы может быть отнесен только самый конец главы VII (правильнее — VIII) в том виде, в каком она была в то время (рассказ о кучере Николае Филипповиче), и, возможно, дальнейшее замечание: «Обрываю начатое описание слуг по порядку. Это показалось мне скучно и не выходит. Буду описывать свою жизнь, вспоминая, сколько могу, назад», а также последующее указание: «Сюда следуют мои первые воспоминания, напечатанные в 12 томе 10-го изд., стр. 447».