Работа, однако, оказалась трудной — и Толстой опять прерывает ее до марта 1858 г. Новое увлечение связано, по-видимому, с общей тенденцией этого момента — уйти от «политической жизни» в «мир искусства», работать над вещью, никак с современностью не связанной, погрузиться в чисто-художественный» материал. На этом особенно настаивают и друзья Толстого — Фет, Боткин. Отталкивание от политики и от злободневности подтверждается не только письмами этого времени, о которых была речь выше, но и одной характерной записью в дневнике (21 марта 1858 г.): «Я весь увлекся Казаками. Политическое исключает художественное, ибо первое, чтобы доказать, должно быть односторонне». Фабула опять обдумывается и переделывается. Особенно затрудняет Толстого (что и характерно) финал: «уяснил себе конец романа. Оф[ицер] должен разлюбить ее» (14 апреля). Судя еще по тому, что важным моментом в фабуле должно было быть «бегство в горы» (13 апреля — «Заколодило на бегстве в горы»), надо думать, что вместо «убили обоих» в этой редакции Лукашка бросает Марьяну, а Оленин женится и разочаровывается. Как бы то ни было, характерно именно то, что при устойчивом и значительном материале отдельных сцен и характеров фабула «Казаков» претерпевает самые резкие изменения и повороты. 29 апреля Толстой перечитывает свой кавказский дневник и записывает 30-го: «Напрасно я воображал, что я такой милый там мальчик. Напротив, а все-таки как прошедшее очень хорошо. Много напомнило для кавказского романа. В романе дошел до второй части, но так запутанно, что надо начинать все сначала или писать вторую часть». Работа опять замедлилась и остановилась— вплоть до 1860 г.
Неудача с «Альбертом», неудача со «Сном», неудача с «Казаками». Мысль о журнале оставлена. Толстой уезжает в деревню и погружается в хозяйственные дела. Еще в письме к Боткину от 4 января 1858 г. Толстой, осуждая и отрицая политическую деятельность, пишет: «Хотят звезды или славы, а выходит государственная польза, а государственная польза выходит зло для всего человечества. А хотят государственной пользы, выходит кому-нибудь звезда, и на ней останавливается. Glaubst du schieben und wirst geschoben. Вот что обидно в этой деятельности. И коли понял этот закон, хорошенько всем существом понял, то такая деятельность уже становится невозможной. То ли дело срубить лес, построить дом и т. д.». К этой деятельности и обращается Толстой, отвернувшись от журналов и от того, что называется «литературой». 12 декабря 1858 г. в дневнике записано: «Литература, которую я вчера понюхал у Фета, мне противна, т. е. я думаю, что, начав литературное поприще при самых лестных условиях общей 2 года одержанной похвалы и почти первого места, без этих условий я не хочу знать литературу, т. е. внешней, и слава богу. Надо писать тихо, спокойно, без цели печатать».
Итак, Толстой выбыл из литературы — по крайней мере «внешней». Правда, окончательное и мотивированное решение явилось несколько позже, но первый шаг уже сделан: прервана связь с «Современником» и центр деятельности переносится в деревню. Это — первый толстовский «кризис», имеющий, как и последующие, вовсе не исключительно-индивидуальный, психологический смысл, а гораздо более глубокий — исторический. Это был кризис эпохи — переход к шестидесятым годам: кризис социальный, поставивший всех перед рядом новых фактов и проблем. Еще недавно Толстой думал о «чисто-художественном» журнале, прошло два-три месяца — мысли этой как не бывало. Он, хотя и с тяжелым чувством от неудач и одиночества, бросает город и литературу и принимается за помещичьи дела. Скоро его примеру последует и Фет, убедившись, как он сам пишет, «в невозможности находить материальную опору в литературной деятельности».