С VIII века императоры начали строить новые дворцы. Большой дворец стал слишком громоздким и потерял монаршую любовь. Еще в VI веке Юстин II (565–578) стал чаще пользоваться Влахернским, чем Большим дворцом. Влахернский дворец находился, как мы уже видели, на противоположной стороне города относительно старого дворца, рядом с церковью того же названия, выстроенной императором Марцианом (или Маркианом) (450–457) и его женой Пульхерией, однако только в XI веке Алексей I Комнин (1081–1118) решил окончательно покинуть Большой дворец и переехать сюда. В XI и XII веках Влахернский дворец снискал любовь благодаря своим дворикам, одетым в мрамор, центральному залу, облицованному порфиром, и изобилию золота в отделке. Тем не менее Алексей и его семья жили там относительно скромно. Только во время правления Мануила I Комнина (1143–1180) Влахернский дворец стал центром веселой придворной жизни. Мануилу дворец пришелся по сердцу, и он заполнял его красивыми предметами. Этот император был большим любителем развлечений, готовым придумывать необычные забавы. На его празднествах никто не скучал. Он часто удивлял гостей новыми потехами собственного изобретения. Так, например, Мануил устраивал турниры на западный манер и приглашал на них дам. В 1204 году, когда Константинополь захватили крестоносцы, решив остановиться здесь и не пытаться спасти Святую землю от мусульман, Влахернский дворец был разграблен и разрушен. Латиняне оставались в городе до 1261 года, когда Палеологи вошли в Константинополь и заняли византийский трон. К тому времени императоры жили в сравнительной нищете. К концу XIV столетия даже на государственных приемах им приходилось есть из глиняной посуды, а не из золотой или хотя бы серебряной. Императорская семья испытывала такие серьезные финансовые затруднения, что Анна Савойская, жена Андроника III (1328–1341), была вынуждена заложить свои драгоценности венецианцам всего за 30 тысяч дукатов. Ей так и не удалось собрать эту относительно небольшую сумму, чтобы выкупить их, поэтому они остались собственностью Венецианской республики.
Двери всех императорских дворцов закрывались ежедневно в три часа пополудни и открывались на рассвете следующего дня. Обязанность закрывать и открывать их возлагалась на старшего привратника, который был также священником. Частная жизнь императорского семейства начиналась в момент закрытия дверей. Теплыми летними вечерами мужчины могли заниматься спортом, например стрельбой из лука, метанием копья или теннисом, наблюдать за поединками боксеров или силачей. Константин VIII дал новую жизнь гимноподии, которая представляла собой вид борьбы, напоминающей бои гладиаторов. В VI веке в Константинополь с Востока пришли шахматы и шашки, в которые вскоре стали часто играть при дворе. Константин VIII имел почти маниакальную страсть к шахматной доске и игре в кости. В IX веке Феофил привез из Персии поло. Оно быстро приобрело популярность в Византии. Матчи часто устраивались на ипподроме Константинополя и в других городах. Эта игра не потеряла своих почитателей даже в XIII веке, когда во время образования Трапезундской империи в Трапезунде была заложена площадка для игры в поло. Константинопольским императорам так нравилось поло, что многие из них играли на своих личных площадках, а когда погода портилась, к их услугам были шуты, карлики, мимы и акробаты, готовые развлекать своих монархов.
В правление династии Комнинов жизнь была веселой и беззаботной, ориентированной на Запад и на все новое. Императрицы этого семейства любили давать балы, организовывать концерты и спектакли с участием мимов в своих загородных усадьбах, которые располагались на окраинах столицы, неизменно среди прекрасных пейзажей, где императоры с давних времен строили охотничьи домики и замки. Феодора выбрала место для своей любимой усадьбы на азиатском берегу Босфора.