Троцкого не было на заседаниях конференции, а 18 января, выполняя советы врачей, он отправился в Грузию. Троцкий находился в Тбилиси, когда он получил сообщение о смерти Ленина. В своем неучастии в похоронах он позже обвинил Сталина, утверждая, что тот ему якобы телеграфировал о том, что похороны Ленина состоятся через день после его кончины. Документально это не подтверждено. В любом случае Троцкий мог направиться в Москву, чтобы, хоть и с опозданием, присоединиться к выражению всеобщей скорби по поводу смерти Ленина.
Как вспоминал Микоян, «еще в 1923 г. начали летать самолеты гражданской авиации. Тогда у нас работала также германская воздушная компания «Люфтганза». В частности, ее самолеты были в Ростове». По мнению Микояна, Троцкий «мог бы использовать и военный самолет для такого экстренного случая – долететь на нем до Ростова или Харькова, а оттуда поездом – и успеть». Отказ Троцкого сделать все возможное для вылета в Москву показался Микояну «возмутительным, характеризующим его личность с самой отрицательной стороны». Даже сыновья Троцкого в письмах в Сухуми выражали свое недоумение его решением.
Троцкий все еще отдыхал в Сухуми, когда ему сообщили, что вместо Э.М. Склянского заместителем предреввоенсовета назначен М.В. Фрунзе. Это назначение свидетельствовало о том, что Реввоенсовет выходил из-под монопольной власти Троцкого. На юге же Троцкий узнал о назначении А.И. Рыкова председателем совнаркома. Он мог поразмыслить о том, что, если бы он в свое время проявил больше смирения и согласился стать первым заместителем Ленина, его теперь могли почти автоматически поставить во главе совнаркома.
Вероятно, в нежелании Троцкого спешить в Москву был свой резон. Для «триумвирата» он мог считаться поверженной фигурой. Опыт интриг мог ему подсказать, что после смерти Ленина внутри политбюро могут начаться конфликты, а ему следует терпеливо ждать неизбежного столкновения в руководстве. Троцкий был прав в принципе, но ошибся в данном конкретном случае: члены политбюро, закаленные трехлетней борьбой против Троцкого, проявляли сплоченность и готовность к продолжению атак на предреввоеносовета.
Оценивая XIII съезд партии, открывшийся 23 мая 1924 года, Дейчер заявлял, что он превратился в «оргию проклятий» в адрес Троцкого. «Лишь один раз, – пишет историк, – Троцкий защитил себя. Он говорил спокойно и убедительно, в его подтексте звучало обреченное признание поражения». Это звучит красиво, но это неточное описание хода съезда. Вплоть до «единственного» выступления Троцкого никто из делегатов не говорил о нем ни слова, если не считать упоминания его фамилии во время выдвижения его кандидатуры в президиум съезда.
Но уже в отчете ЦК партии, который сделал Г.Е. Зиновьев, была дана резкая оценка той борьбе, в которой Троцкий принимал участие, хотя его фамилия и не была произнесена. По сути, Зиновьев оценил выступление оппозиции как беспрецедентную угрозу переворота. После открытия прений по докладам вторым выступил Троцкий. Признания ошибок от него не услышали. Его речь, которую Угланов назвал «парламентской», была предельно осторожной по форме. На протяжении почти всей речи Троцкий старался избегать обычных для него эмоциональных фейерверков. Характер выступления Троцкого отвечал его тактическим целям, направленным на то, чтобы удержать руководящее положение в партии и стране и одновременно сохранить свой авторитет в глазах оппозиции. Отвергая обвинения в мелкобуржуазном уклоне, Троцкий ограничивался тем, что осторожно называл их «преувеличенными». Троцкий утверждал, что его действия не были направлены на изменение состава ЦК, а лишь на развитие внутрипартийной демократии в духе резолюции 5 декабря 1923 года.
В то же время Троцкий категорически отказался сделать то, чего от него требовал Зиновьев: недвусмысленного признания ошибочности своей позиции. Отвечая Зиновьеву, Троцкий заявлял: «Я уже сказал, что перед лицом партии нет ничего легче, как сказать: вся эта критика, все заявления, предупреждения и протесты – все это было сплошной ошибкой… Если я, по мнению иных товарищей, напрасно сделал здесь те или другие напоминания… напрасно рисовал те или другие опасности, то я, со своей стороны, считаю, что я выполню только свой долг члена партии».