Его сторонники, однако, оказались упрямы, они даже думать не хотели о другом кандидате, так что папский престол пустовал около года. На Пасху 1086 г. все кардиналы и самые влиятельные епископы собрались в Риме и послали Дезидерию официальное приглашение присоединиться к собранию. Он согласился с большой неохотой, и его сразу засыпали просьбами изменить свою точку зрения. Дезидерий оставался непреклонен. Наконец, в отчаянии собравшиеся согласились принять любого кандидата, которого он назовет. Дезидерий немедленно предложил Одо из Остии, добавив с характерной для него неуверенностью, что, если подобный выбор не будет сразу одобрен в Риме, он охотно предоставит новому папе убежище в Монте-Кассино на любой срок, на который потребуется. Но все было бесполезно. Чем больше Дезидерий говорил, тем больше у слушателей крепла решимость избрать его и никого другого. Кандидатура Одо была отвергнута на том основании, что его избрание противоречит каноническому праву, хотя все знали, что это чепуха. Римляне, без сомнения хорошо проинструктированные заранее и имеющие опыт в таких делах со времени избрания Гильдебранда тринадцатью годами ранее, громко ратовали за Дезидерия. Сопротивляющегося аббата препроводили в соседнюю церковь Святой Лючии, где он, к своему отчаянию, услышал, что его радостно провозглашают папой Виктором III. Красную ризу набросили на его плечи раньше, чем он успел этому воспротивиться, но никакими уговорами не удалось заставить его надеть другие знаки папского достоинства.
Спустя четыре дня в Риме начались беспорядки. Рожер Борса выбрал этот момент для того, чтобы освободить имперского префекта Рима, которого его отец заточил в темницу два года назад. Сделал ли он это, чтобы насолить Жордану из Капуи и папской курии (которая недавно отказалась утвердить кандидатуру нового архиепископа Салерно), или проявил обычную свою бестолковость, неизвестно, но он совершил большую глупость. Покладистый и благожелательный Дезидерий явился, с точки зрения нормандцев, лучшим кандидатом в папы, но теперь префект направился прямо в Рим, поднял старую имперскую фракцию и сорвал официальную церемонию в соборе Святого Петра. Худшие опасения нового папы подтвердились. Он, видимо, только обрадовался возможности доказать, что папская кафедра – не для него. Даже не пытаясь сопротивляться, он покинул Рим, сел на корабль, отправлявшийся в Террачину, откуда, официально объявив о своем отречении, вернулся в Монте-Кассино.
Теперь положение стало еще хуже. Кроме того, раздались первые голоса, враждебные Дезидерию. Гуго из Лиона и Одо из Остии, названные умирающим Григорием и полагавшие себя на редкость подходящими кандидатами для получения папской тиары, естественно, возмутились той манерой, в которой она была возложена на голову их коллеги, не желавшего ее и показавшего явную свою непригодность для столь ответственного поста. В октябре эти два недовольных прелата, сопровождаемые несколькими другими церковными иерархами, теперь разделявшими их мнения, прибыли в Салерно. Рожер Борса, все еще горевавший из-за своего архиепископа, с готовностью их принял, и, хотя мы не знаем, о чем они договорились, с этого времени популярность настоятеля стала падать. Разве он не заключил сепаратного договора с Генрихом IV, когда Генрих открыто угрожал не только Риму, но и самому папе? Разве он не был за это на год отлучен от церкви? Достоин ли этот человек быть наместником Христа на земле?