Бурные события 1917 года почти не коснулись дворца. О его существовании в советское время знали лишь особо посвященные, принадлежавшие к партийной элите. Прославился дворец в 1945 году, когда во время Ялтинской конференции глав СССР, США и Англии стал резиденцией советской делегации во главе с И. В. Сталиным.
В 1917–1918 годы большая семья Юсуповых жила в Крыму, а в апреле 1919 года, когда приблизились войска красных, вместе с вдовствующей императрицей Марией Федоровной и оставшимися в живых членами династии Романовых на английском крейсере «Мальборо» она покинула Родину.
Из Крыма за границу бежали Ф. Ф. Юсупов-старший, его жена Зинаида Николаевна, Ф. Ф. Юсупов-младший, его жена Ирина Александровна и их четырехлетняя дочь. Надеялись, что временно, оказалось — навсегда.
Начались долгие годы изгнания, как впоследствии напишет Ф. Ф. Юсупов, «перипетии и терзания нашей жизни на чужой земле».
Из Крыма Юсуповы отплыли на Мальту, где стараниями британских властей крымским беженцам приготовили жилье. После Мальты Зинаида Николаевна и Ф. Ф. Юсупов-старший обосновались в Риме. Ирина Александровна и Ф. Ф. Юсупов-младший поселились сначала в Лондоне (для продолжения путешествия Феликсу Феликсовичу пришлось заложить Иринино брильянтовое колье), а потом перебрались в Париж.
О жизни русских эмигрантов в Италии Ф. Ф. Юсупов-младший в своих «Мемуарах» пишет так:
«В Риме, как и везде, положение большей части наших соотечественников было тяжелейшее. Моя мать собиралась организовать дом помощи беженцам по примеру нашего в Лондоне. Трудности возникли те же, то есть в основном денежные. Средств, какие могли собрать мы в Риме, не хватило бы. Надо было создавать в других городах комитеты по сбору пожертвований с дальнейшей отправкой в центр в Рим.
Взяв в помощники Федора, я отправился по итальянским городам, где надеялся на добрый прием. Таким он и был, особенно в Катанье. Тамошние жители не забыли еще самоотверженность русских моряков во время землетрясения, разрушившего Мессину в 1908 году».
В семье Юсуповых постоянно шли споры по поводу дальнейшего обустройства. Ф. Ф. Юсупов-старший надеялся вернуться в Россию. Зинаида Николаевна с сыном разубеждали его. В результате, когда пришло известие о полном и окончательном разгроме белых в Крыму, родители с внучкой остались в итальянской столице, где Зинаида Николаевна возглавила центральный комитет помощи русским беженцам.
Ф. Ф. Юсупов-младший вспоминает:
«Двери на родину для нас закрылись. Предстояло выбрать наконец место жительства. К русским повсюду относились враждебно. В изгнании это видеть было еще тяжелей. Личные связи и симпатии ничего не меняли. Белой армии более не существовало… Эмигранты большей частью ехали во Францию».
От былой роскоши очень скоро не осталось и следа. Ф. Ф. Юсупов-младший и за границей вел себя как русский барин. Он никогда не умел считать деньги и, хотя за границу он приехал не с пустыми руками, очень скоро все потратил.
В своих «Мемуарах» он пишет: