Между тем Наполеон не желал развивать сражение и по мере движения войск Даву к Красному направлял их дальше по дороге на Оршу. Когда большая часть корпуса Даву уже прошла Красный, император получил сведения о движении обходного отряда Тормасова ему в тыл. В то же время активизировали свои действия войска Голицына. Опасаясь окружения, Наполеон решил пожертвовать корпусом Нея и отойти. Теперь Кутузов приказал Тормасову как можно быстрее двигаться к селу Доброе, но догнать французов было уже трудно. Правда, Розену и Ожаровскому удалось нанести сильный удар по частям, замыкающим колонну корпуса Даву, в результате которого перестала существовать дивизия Дитерихса. Но Наполеон ушел, за что Кутузова потом много критиковали, поскольку «каждый мнит себя стратегом, видя бой со стороны». Разбирая войну 1812 года, Клаузевиц по похожему поводу отмечал: «...главное — это трудность выполнения. На войне все просто, но самое простое в высшей степени трудно. Орудие войны походит на машину с огромным трением... это трение встречается повсюду и вступает в контакт с массой случайностей. Кроме того, война представляет собой деятельность в противодействующей среде. Опасность и напряжение — вот те стихии, в которых на войне действует разум. Об этих стихиях ничего не знают кабинетные работники. Отсюда получается, что всегда не доходишь до той черты, которую себе наметил; даже для того, чтобы оказаться не ниже уровня посредственности, требуется недюжинная сила».
К вечеру 17 ноября Тормасов, войска которого Кутузов усилил 3-м пехотным корпусом, и Голицын занимали район у речки Лосминка. Таким образом, корпусу Нея предстояла весьма трудная задача — прорваться через мощный заслон русских. Ней сильно задержался в Смоленске: он выступил оттуда только в два часа ночи 17 ноября, взорвав по приказу Наполеона восемь годуновских башен, Королевские ворота и уцелевшие крупные здания. Отходя от города, Ней вынужден был бросить 140 своих орудий, 17 трофейных русских и большую часть обоза. Кроме того, оставил в полевых госпиталях более 4000 раненых. В строю у него было 8500 солдат при 12 орудиях, сзади за корпусом брели толпы отставших.
Вечером 17 ноября Ней пришел к Корытне. Услышав канонаду у Красного, он решил, что это пробивается на соединение с главными силами корпус Виктора, и не придал ей особого значения. У Корытни Ней заночевал. На рассвете следующего дня он продолжил движение. Появление неприятеля на переправе через Лосминку оказалось для Нея неожиданностью, обнаружив русских, он решил атаковать их с ходу.
Со своей стороны Милорадович привел войска в боевую готовность и послал к Нею парламентера с предложением капитулировать. На что последний ответил: «Императорские маршалы в плен не сдаются!» Задержав парламентера, чтобы он не рассказал о тяжелом положении корпуса, Ней приказал дивизии генерала Разу атаковать русскую позицию, чтобы прорваться к городу. Французы под прикрытием «в то время случившегося тумана» пошли в наступление, их поддерживал огонь шести орудий. Однако вскоре русская батарея заставила замолчать французские пушки, а затем картечным огнем остановила наступающих. После чего войска 1-й и 26-й дивизий, два полка 1-й гренадерской дивизии, поддержанные кавалерией, бросились в контратаку и опрокинули французов. По словам Кутузова, «неприятель оставил пушки, знамена и множество пленных и убитых, был сбит с поля сражения и рассеян по лесам».
Тогда Ней направил в атаку подошедшую дивизию Лендрю, а остатки дивизии Разу собрал и направил через лес к Сырокоренью. Под прикрытием боя ему удалось стянуть к переправе часть своих войск и обозы. Но Кутузов, предвидя возможность использования противником этой переправы, приказал Голицыну взять ее под контроль. Когда Ней с частью уцелевших войск пробился к реке, отряд полковника Чернозубова ударил по французам и окончательно разгромил их, захватив много пленных. Части дивизии Лендрю были окружены и капитулировали. «В 12 часов пополудни, — сообщал в рапорте Кутузов, — неприятельский корпус... положа ружья, сдался».
Ней с 800 бойцами перешел Днепр по первому хрупкому льду и явился к Наполеону в Оршу, где его уже считали погибшим. Император молча сжал маршала в своих объятиях. Ней и дальше вызвался командовать в самом опасном месте: в арьергарде. Один из активнейших участников преследования отступающих французов, русский генерал Левенштейн, дал такую оценку этой последней фазе боев под Красным: «Ней сражался как лев, но время побед для французов миновало... С наступлением ночи маршал Ней направился со слабыми остатками своего корпуса к Сырокоренью, и ему удалось, пройдя сквозь победоносную армию, перейти Днепр, который был покрыт тонким льдом. Этот подвиг будет навеки достопамятен в летописях военной истории. Ней должен был бы погибнуть, у него не было иных шансов к спасению, кроме силы воли и твердого желания сохранить Наполеону его армию».