Манфреда это не испугало. Весной 1257 г. новый переворот в Риме вновь вернул к власти Бранкалеоне, который вступил в союз с Манфредом. Бранкалеоне был убит на следующий год, и Рим постепенно, шаг за шагом, снова перешел на сторону папства. Но Манфред тем временем опустошил большую часть папских земель. В Тоскане он получил поддержку Сиены, а из-за интриг кардинала Октавиана, который мнил себя посредником между гибеллинами и папством и пытался заставить своих флорентийских собратьев разделить его взгляды, Флоренция была ослаблена. В итоге в сентябре 1260 г. флорентийцы были разбиты во время кровавой битвы при Монтаперти — жуткой бойни, окрасившей воды реки Арбии в красный цвет. Победа дала Манфреду власть над Центральной Италией, которой он с тех пор правил через наместников, словно уже был императором. На севере он опирался на самого могущественного и деятельного деспота в Ломбардии, маркграфа Уберто Паллавичини, правившего от имени Манфреда, а также на союз с генуэзцами. Один за другим города гвельфов покорялись сицилийскому королю. Свергнув и убив в 1259 г. веронского тирана, гибеллина Эццелино, рассорившегося со всеми своими соседями, Паллавичини сумел, благодаря энергии и такту, сохранить мир в Ломбардии. Манфред тем временем занял Сардинию, пренебрегши правами на ее корону своего плененного брата Энцио. К 1261 г. вся Италия была под властью Манфреда, и Папа остался изолирован, охваченный бессильным гневом, не имея ничего, кроме шаткой власти над Римом.39
Амбиции Манфреда все росли. Он не оставлял мысли об империи и рассчитывал, что когда-нибудь сможет добиться власти над Германией. А между тем он мог бы действовать и в другом направлении и стать предводителем католического христианства.
Кто бы ни правил Южной Италией и Сицилией, ему следовало принимать во внимание не только полуостров, но также и соседние страны, отделенные узкой полосой морей. Нормандские короли стремились установить контроль над Тунисом в Африке, но они еще больше хотели распространить свою власть за Адриатическое море на Балканы и на принадлежащие Византии полуостров и острова. Фридрих II был слишком занят своими делами в Центральной Европе для того, чтобы продолжать их политику. Его целью было сохранить союзников за морем, с тем чтобы его враги-паписты не создавали ему там проблем. Манфред, упрочив свою власть в Италии, вернулся к нормандским традициям. У него не было никаких видов на Африку, поскольку эмиры из династии Хафсидов в Тунисе были к нему сильно расположены. Но бывшие земли Византии на Балканах открывали широкий простор для его амбиций.
Четвертый крестовый поход 1204 г. разрушил Византийскую империю, но так и не создал на ее месте стабильного государства. Латинская империя, основанная в Константинополе, империя Романии, быстро пришла в упадок. Уже через пятьдесят лет после ее основания она состояла лишь из самого Константинополя, третью которого уже владели венецианцы, и ближних его предместий. Латинский император Константинополя Балдуин II объездил всю Западную Европу в поисках покровителя, который помог бы ему удержаться на шатком троне. Он уже отдал лучшие реликвии из старой византийской сокровищницы Людовику Святому, чтобы добыть немного денег. Он оплачивал расходы своего двора, продавая свинец с крыши дворца итальянским купцам, и заграничные поездки, оставляя своего сына и наследника в залог венецианцам. Только вмешательство какого-нибудь союзника могло удержать империю от падения в ближайшие годы.40