Милорадович начал канонаду из ста орудий и открыл сокрушительный огонь по пяти дивизиям Даву. Наши орудия отвечали ему с преимуществом. Как ни горяч был Милорадович, но не решился атаковать внушительный фронт опытных солдат и ограничился артиллерийским обстрелом. Головная часть русской армии, выйдя к речке, прикрывавшей Нея, в свою очередь начала канонаду, но Ней тотчас отвечал ей градом ядер. Так простояли какое-то время, осыпая друг друга яростным артиллерийским огнем, и неприятель, который должен был нас сокрушить, ибо вчетверо превосходил численностью, всё еще остерегался атаковать. Настало время отходить французам, ибо они достаточно продемонстрировали свою силу русской армии, чтобы она воздержалась от всяких серьезных нападений, и к тому же важно было перейти через Вязьму, пока не наступила темнота. В то время как генерал Бруссье отступал на городок, пользуясь тем, что располагался к нему ближе всего, пять дивизий Даву продефилировали перед неприятелем: каждая линия производила ружейный огонь, а затем сворачивалась и отходила в промежутки следующей линии, которая в свою очередь открывала огонь, чтобы защитить движение отступавших колонн. Генерал Моран остался последним в боевых порядках, чтобы прикрыть отступление всех остальных. Наконец и он свернул свои линии, и, поскольку на него с силой напирали, 57-й остановился, повернулся кругом, двинулся на русских, опустив штыки, оттеснил их, а затем вернулся на дорогу к Вязьме.
К несчастью, стало темно; часть города, располагавшаяся за рекой и обнажившаяся в результате отступления Нея, была внезапно захвачена неприятелем. Мы на него напоролись, и, чтобы прорваться, пришлось вести самый ожесточенный бой. В сумятице мы потеряли два орудия. Поскольку через Вязьму было только два моста, один в городе, другой снаружи, скопление войск, темнота и артиллерийский огонь привели к некоторому беспорядку. Доблестный 57-й повторными атаками сдержал русских и прикрыл переход через реку.
Этот бой обошелся французской армии в 1500—1800 самых лучших солдат. Поскольку ее артиллерия била более метко, неприятель понес потери по меньшей мере вдвое большие; но его раненые не были потеряны, тогда как французам не удалось спасти ни одного из своих раненых. Абсолютное отсутствие ухода, начавшиеся холода и, главное, жестокость крестьян обрекали на смерть всех, кто оставался на дороге.
В Вязьме не нашлось никаких средств существования. Гвардия и прошедшие через город корпуса смели всё, а московского продовольствия больше не осталось. Холодной темной ночью бросились в лес, зажгли большие костры и пожарили на них конины. Солдаты Евгения и Даву, особенно последние, бывшие на ногах уже три дня, легли прямо у бивачных костров и погрузились в глубокий сон. Было 3 ноября; они прикрывали отступление уже две недели, потеряв больше половины своего состава. Наполеон решил предоставить солдатам отдых и заменил их в арьергарде Неем. Впрочем, это была с его стороны не милость, а несправедливость: Наполеон жаловался на то, что они двигаются слишком медленно. Живя среди гвардии в голове армии, поглощавшей те немногие припасы, какие еще можно было найти на дорогах, и оставлявшей павших лошадей тем, кто шел за ними, он не видел собственно отступления и не хотел ничего видеть, ибо ему пришлось бы смотреть на ужасные последствия своих ошибок. Он предпочитал их отрицать и, находясь в двух маршах от арьергарда и не замечая его затруднений, продолжал на него жаловаться, вместо того чтобы отправиться руководить им.
После Малоярославца Наполеон не беседовал с Даву. Увидевшись с ним вновь, он имел со своим маршалом самое бурное объяснение. Даву, хоть и приученный к повиновению того времени, обладал гордостью, которую не могла сломить никакая власть. Он с горечью защищал честь 1-го корпуса. Такие офицеры, как генералы Ком-пан, Моран и Жерар, всегда на коне, пусть и раненые, не заслужили ни одного упрека. Даву защищал не себя, он защищал своих славных генералов, которым был обязан всем. Наполеон умолк, но до самого дня своего огьезда из армии не обратился более к Даву ни с одним словом, что, впрочем, для последнего не было наказанием. Тем не менее знаменитый полководец был принесен в жертву в России так же, как Массена в Португалии. Принялись повторять, вслед за Наполеоном, что во время отступления он вел себя недостойно своего великого характера. Это было так же верно, как то, что Массена стал причиной невзгод армии на Иберийском полуострове.