Однако Холман отказался давать развод, и жена Лоренса последовала его примеру. Мать Вивьен также стала на сторону ее законного супруга и заявила, что развод — это великий грех, которому нет прощения. Почему любовь, самое прекрасное и святое чувство на земле, — грех, это Вивьен было очень трудно понять. Ей казалось, что наконец, после долгих лет сомнений и исканий, она встретила именно того мужчину, о котором мечтала. И отказаться от этого человека ради соблюдения приличий, вернуться к нелюбимому мужу она не могла. Вивьен вступила в открытый конфликт со всеми, кто пытался убедить ее, что не следует разрушать жизнь своей семьи и семьи Лоренса. В атмосфере всеобщего непонимания Ли глубоко страдала. У нее случился первый нервный срыв. Иногда ей казалось, что она скоро поддастся на уговоры матери и друзей и вернется в семью, иногда — что ни за что в жизни не оставит Лоренса, свою самую красивую мечту. Быть может, любовь, подверженная стольким испытаниям, и угасла бы в груди другого человека, но сильная натура Ли взяла верх — она приняла решение ни за что не отступать. «Если любовь грех, то мир перевернулся», — рассудила актриса. Она прекратила посещать церковь, начала курить. Пытаясь забыть все неурядицы личной жизни, окунулась в работу, которая стала для нее своеобразным спасательным кругом среди океана всеобщего осуждения и непонимания.
Любовники часто снимались вместе, но старались ничем не выдавать своих чувств. Эта жестокая игра продолжалась несколько лет — находиться рядом с любимым человеком и делать вид, что он тебе безразличен, выходить утром из одного номера и ехать на киностудию в разных автомобилях, здороваться в павильоне кратким кивком головы… Вивьен чувствовала, что сходит с ума от горького спектакля, в который превратилась ее жизнь. Но в январе 1937 г. прошла премьера «Гамлета» с Лоренсом Оливье в главной роли. Он потребовал, чтобы роль Офелии играла Ли, и продюсеры согласились. В ходе гастролей любовники еще больше сблизились и окончательно решили не возвращаться в свои семьи. Встреча Джилл с Вивьен не принесла покинутой жене никаких результатов, а лишь убедила, что Лоренс для Ли не просто увлечение, а настоящая любовь, за которую актриса намерена сражаться до конца. И хотя Джилл, возлагая большие надежды на это свидание, взывала к материнским чувствам Вивьен и просила не лишать их с Лоренсом сына родного отца, Ли ответила решительным отказом. Больше никто и ничто не сумеет разлучить ее с любимым.
Через некоторое время Оливье купил дом в Лондоне, где поселился со своей возлюбленной. Затем они отправились в Венецию. Это путешествие принесло обоим огромную радость и стало настоящим медовым месяцем — наконец они остались вдвоем и могли, никому не известные, бродить по улочкам, любуясь старинными домами и наслаждаясь своей любовью. Вивьен была счастлива — сбылась мечта маленькой девочки о красивом, сильном, талантливом принце, который уведет ее за собой в мир грез.
По возвращении на родину оба принялись за работу. В это время студия «МГМ» занялась подготовкой к экранизации нашумевшего романа Маргарет Митчелл «Унесенные ветром». Вивьен была абсолютно уверена, что роль Скарлетт — ее. Однако продюсер картины Дэвид Селзник не разделял этого мнения, считая, что в Голливуде могут обойтись и без Ли. Тем более не хотел он слышать об Оливье в роли Ретта Батлера. Пока актеры строили честолюбивые планы, над их головами собирались тучи. В декабре 1937 г. почти одновременно Джилл и Холман в очередной раз отказались предоставить им развод. Покинутые супруги втайне надеялись, что роман их половинок пройдет сам собой и они вернутся в семьи. Спекулируя на том факте, что у Вивьен — маленькая дочь, а у Лоренса — сын, Джилл и Герберт пытались разлучить любовников. В этой обстановке Оливье стал раздражительным и ревнивым, даже запрещал возлюбленной встречаться с дочерью. Вивьен замыкалась. Мечты снова столкнулись с реальностью, и она опять находилась на грани нервного срыва. Свое состояние актриса усердно скрывала под маской презрения ко всему и всем.
Однажды, не выдержав нахлынувшей тоски, Вивьен позвонила одному из журналистов «Таймс» и пригласила его в дом Оливье. В ходе интервью она откровенно рассказала о сложившейся ситуации. «Мой муж и его жена договорились не давать нам развода — это единственная причина нашей жизни в грехе», — сказала она. Общественность ответила молчанием, предоставив Лоренсу и Вивьен возможность самим разбираться в своих проблемах.