В более поздние годы, когда турки завоевали большую часть Балкан, об участии Кантакузина в заключении этих соглашений, конечно же, вспомнили и вменили это ему в вину. Однако же в то время такая политика была разумной. Хотя турки и вытеснили византийцев из Малой Азии, они не представляли угрозы для существования империи. Как уже было сказано, они разделились на небольшие группы: османы и айдыны были всего лишь двумя из многих разрозненных государств, на которые распался Сельджукский султанат в Конье. Все эти турки были мусульманами, но не были фанатичными воинами, жаждущими нескончаемой войны с неверными. Первоначально, во времена Михаила VIII, они вторгались на византийскую территорию ради овец и скота и начали захватывать земли, лишь когда стало ясно, что им почти не оказывают сопротивления. Идея о том, что они были гази, защитниками веры, оформилась позже, когда османы выдвинулись вперед и хотели оправдать поглощение ими других турецких эмиратов, – точно так же позже появилась и фальшивая родословная, согласно которой османские султаны были прямыми потомками Пророка. Но в 1330-х годах все было иначе, и заключить мир со множеством врагов и заручиться их помощью в борьбе против других стоило: возвращение Малой Азии можно было отложить на потом. Все это было вполне в традиции византийцев.
Тактика оказалась успешной. Если отстоять Малую Азию Андронику III и Кантакузину не удалось, то в других местах они восстановили византийское господство на территориях, которые казались потерянными навсегда. Когда в 1329 году жители Хиоса восстали против своих правителей-генуэзцев, Андроник приплыл туда со своим флотом и захватил остров. Семь лет спустя генуэзцы были вытеснены с другого острова в Эгейском море, Лесбоса. В 1333 году в состав империи вновь вошла Фессалия, область в северной части Греции с центром в городе Ларисса, которую Михаилу VIII вернуть не удалось. Наконец, в 1338 году, в сопровождении войска из 2000 турок, присланных Умуром, Андроник III и Кантакузин двинулась на запад, чтобы подавить восстание в Албании. Оно вскоре прекратилось, албанцы в ужасе бежали от странного вида восточных солдат в византийской армии. В то же время император решил воспользоваться тем, что деспот Эпира недавно умер, и отправил ультиматум двору в Арте. Новый деспот был еще подростком, и государством правил регентский совет. Его члены решили не сопротивляться и сдались на милость императору. Конечно, кое-кто еще противился захвату, но к концу 1340 года Эпир вновь вошел в состав империи. И на этом движение остановилось. Летом, на пути из Фессалоник в Константинополь, Андроник III почувствовал себя измученным и нездоровым. В июне 1341 года в возрасте 45 лет он умер.
После смерти Андроника III в Византии сложилась такая же ситуация, какая уже бывала много раз прежде. Престол унаследовал его девятилетний сын Иоанн V, и был сформирован регентский совет во главе с матерью мальчика, латинянкой Анной Савойской, и патриархом. Но все понимали, что в таких условиях, вероятнее всего, бразды правления возьмет в свои руки самый видный в империи полководец, и сделает он это с одобрения регентов или без оного. В этой роли многие видели Иоанна Кантакузина. В сентябре 1341 года во дворе Большого дворца прошла шумная демонстрация его сторонников, которые требовали для него более высокого положения. Однако сам Кантакузин в своих мемуарах позже утверждал, что ему было мучительно стыдно за случившееся и что он ни в коем случае не претендовал на престол. Правда это или нет, но Кантакузин неизбежно должен был вызвать подобные подозрения. И когда в том же месяце он покинул Константинополь, чтобы возобновить командование армией в Дидимотике, регентский совет завладел его имуществом и бросил в заточение его семью. А самому Кантакузину отправили приказ оставить командование и немедленно вернуться в Константинополь. Конечно же, он не стал этого делать, и 26 октября в Дидимотике войска провозгласили его императором.