После поездки за границу (он пробыл там с 10 мая 1922 года по 3 августа 1923 года), имажинизм стал Есенину тесен. «Сейчас я отрицаю всякие школы. Считаю, что поэт и не может держаться определенной какой-нибудь школы. Это связывает его по рукам и ногам. Только свободный художник может принести свободное слово». Впрочем, в разрыве с имажинистами не малую роль сыграла личная ссора Есенина с Мариенгофом. Галина Бениславская (одна из подруг поэта) виновницей ссоры (роковой, по ее мнению) называла сестру поэта. «Катя в жизни С. А. совершенно невольно была злым гением, постоянно нарушая и без того неустойчивое душевное равновесие его. Трудно представить, но я хорошо знаю, что в разрыве С. А. с Мариенгофом (которого С. А. очень любил) она сыграла главную роль, хотя С. А. почти не говорил об этом. А корни были вот в чем. Когда С. А. был за границей, денежные дела у Мариенгофа были очень плохи. „Стойло Пегаса“ закрылось, магазин ничего не давал, и Мариенгоф с Мартышкой (домашнее прозвище жены Мариенгофа), ждавшей тогда ребенка, форменным образом голодали. Я это знаю от лиц, живших в одной квартире с ними. Катя, по ее словам не знавшая нужды при С. А., неоднократно обращалась к Мариенгофу, зная, что часть денег из магазина принадлежит С. А., но денег не получала. Не зная, а может быть, по легкомыслию не желая вникнуть в положение Мариенгофа, она возмущалась и, кажется даже писала С. А. о том, что Мариенгоф не дает денег. Во всяком случае, по возвращении Есенина из-за границы она говорила об этом С. А., который, как и следовало ожидать, страшно обозлился на Мариенгофа…»
«Вернувшись в Москву, – вспоминал Ходасевич, – глубоко погрузясь в нэповское болото (за границу он уехал в самом начале нэпа), ощутив всю позорную разницу между большевистскими лозунгами и советской действительностью даже в городе, – Есенин впал в злобу. Он снова запил, и его пьяные скандалы сперва приняли форму антисемитских выходок. Тут отчасти заговорила в нем старая закваска, и злоба Есенина вылилась в самой грубой и примитивной форме. Они (Есенин и поэт Клычков, принимавший участие в скандалах) были привлечены к общественному суду, который состоялся в так называемом „Доме Печати“. О бестактности и унизительности, которыми сопровождался суд, сейчас рассказывать преждевременно. Есенина и Клычкова „простили“. Тогда начались кабацкие выступления характера антисоветского. Один из судей, Андрей Соболь, впоследствии тоже покончивший с собой, рассказывал мне в начале 1925 года в Италии, что так „крыть“ большевиков, как это публично делал Есенин, не могло и в голову прийти никому в советской России; всякий сказавший десятую долю того, что говорил Есенин, давно был бы расстрелян. Относительно же Есенина был только отдан в 1924 году приказ по милиции – доставлять в участок для вытрезвления и отпускать, не давая делу дальнейшего хода. Вскоре все милиционеры центральных участков знали Есенина в лицо. Конечно, приказ был отдан не из любви к Есенину и не в заботах о судьбе русских писателей, а из соображений престижа: не хотели подчеркивать и официально признавать „расхождения“ между „рабоче-крестьянской“ властью и поэтом, имевшим репутацию крестьянского…»