Несмотря на свою уверенность арагонский папа предусмотрительно решает укрыться в более надежном месте. С четырьмя оставшимися при нем кардиналами он заперся в укрепленном логове Пеньисколы: там он узнает об отказе от повиновения Арагона в январе 1416 года, о его осуждении собором Констанцы в июле 1417 года и, наконец, 11 ноября — об избрании нового папы Мартина V. Король Арагонский Альфонс V, получивший власть после своего отца Фердинанда I, попросил старика исчезнуть. Но полностью отошедший от земных проблем Бенедикт XIII отлучил от церкви Мартина V и своих собственных кардиналов, присоединившихся к новому папе! Целых шесть лет с высоты своей скалы он будет бросать вызов всему миру.
Пеньискола — это дикое убежище, местоположение которого великолепно защищает потерявшего власть папу от покушений. Чтобы туда добраться, от Кастельон-де-ла-Плана нужно ехать на юг то по узкой равнине, засаженной апельсиновыми деревьями, зажатой между морем и горной цепью, то через ущелья суровых горных районов, через ленные владения военного ордена Монтеса,
Официально Альфонс V Арагонский продолжает требовать отречения старого папы. Но он ведет двойную игру. Ему выгодно поддерживать раскольническое папство. Это ему нужно, чтобы осуществить дорогой его сердцу план: завоевание Неаполя. В 1421 году королева Жанна II Неаполитанская усыновила Альфонса, потом она лишила его права наследования в пользу Людовика III Анжуйского. И так как Людовик пользовался поддержкой Мартина V — римского папы, — Альфонс Арагонский не сделал ничего, чтобы побеспокоить старого папу-бунтовщика.