Поначалу казалось, что полководец сделал правильный выбор – кельты действительно выдали заложников, обеспечили армию продовольствием и проводниками. Однако подозрения Ганнибала это не рассеяло, и он предпринял особые меры предосторожности во время марша: слоны, конница и обоз шли во главе колонны, а замыкала шествие тяжеловооруженная пехота. Два дня поход продолжался без помех. Но вот армия вступила в ущелье, по дну которого пролегало русло Дюранса (к северу от совр. л’Аржантьер-ла-Бессе), а дорога поднималась выше и шла вдоль края пропасти. Большая часть опасного участка была уже позади, и авангард армии приближался к выходу из ущелья, когда с горных склонов на колонну посыпались камни, а из засад ударили варвары, причем особенно яростным атакам подвергся арьергард. Как отмечают оба наших автора, если бы Ганнибал не поставил в хвосте колонны пехоту, разгром всей армии был бы неминуем, однако и в этих обстоятельствах карфагенянам пришлось очень трудно. Воспользовавшись тем, что конница и обоз, подойдя уже к самому выходу из ущелья, находились на очень узком участке тропы, кельты мощной атакой смогли отрезать их от пехоты, при которой находился и Ганнибал. В течение всей ночи пунийский арьергард сражался сам по себе, прикрывая отход остальных сил, и только на следующий день, когда нападения варваров прекратились, обе части армии смогли соединиться.
Так карфагеняне вновь едва избегли гибели, понеся, впрочем, весьма чувствительные потери, особенно во вьючном скоте. По мере дальнейшего продвижения армия Ганнибала еще неоднократно подвергалась налетам небольших кельтских отрядов, целью которых был захват какой-либо части обоза, однако крупных сражений больше не было. Неожиданно полезными в горах оказались слоны. Хотя вести их по крутым тропам было непросто, а скорость движения колонны из-за них существенно снижалась, они одним своим присутствием предотвратили многие нападения варваров, которые боялись огромных неведомых зверей.
Дорога давалась с трудом. Несколько раз Ганнибалова армия сбивалась с пути из-за обмана проводников или, напротив, излишнего недоверия к ним. Был девятый день с начала восхождения, когда пунийцы достигли верхней точки перевала. О том, что это было за место, споры в научной среде не утихают на протяжении десятилетий. Тем не менее наиболее предпочтительной кажется версия, идентифицирующая этот перевал как Монженевр. Здесь Ганнибал распорядился сделать остановку на два дня, поскольку воины нуждались в отдыхе, к тому же имело смысл подождать отставших. Кроме людей, до лагеря дошли и многие из отбившихся ранее лошадей и вьючных животных.
Только пунийцы перевели дух, как им уже предстояло бороться с новыми трудностями, по сравнению с которыми недавние нападения местных кельтских племен могли показаться совсем не такими опасными. Альпийская природа заявила о себе: стояла уже середина октября (по Полибию, незадолго до захода Плеяд, по Ливию, непосредственно в ночь захода; Полибий, III, 54, 1; Ливий, XXI, 35, 6), когда стоявший на перевале лагерь накрыл снегопад. На следующий день поход продолжился, но люди были уже на грани отчаяния и еле шли вперед. Ганнибал, помня о долге полководца, опередил колонну и, приказав остановиться и слушать его, указывая на другую сторону перевала, ободрил своих бойцов: «Теперь вы одолеваете стены не Италии только, но и Рима. Отныне все пойдет, как по ровному отлогому склону; одна или, много, две битвы отдадут в наши руки, под нашу власть крепость и столицу Италии» (Ливий, XXI, 35, 9). Маловероятно, что он сам верил, будто победа над Римом дастся так легко, но его слова вновь вдохнули в людей надежду на добычу и новые силы.
Начинался спуск. Дорога была узкой и крутой, выпавший снег скрывал неровности и опасные места, и любое неверное движение приводило к падению в пропасть. Дальше было хуже. Примерно стопятидесятиметровый участок тропы после недавней лавины стал настолько узок, что по нему невозможно было провести ни слонов, ни вьючных животных, а значит, и для всего войска путь оказывался закрытым. Попытки обхода не привели ни к чему, кроме новых жертв. Свежий снег покрыл неглубоким слоем слежавшийся в твердую скользкую массу прошлогодний, и удерживать равновесие на нем было особенно трудно. Люди скользили, а животные, наоборот, порой пробивали его копытами насквозь и уже не могли двинуться с места. Тем же, кто падал, было почти невозможно подняться обратно на ноги, особенно там, где лед был ничем не прикрыт.