После объяснения произошла трагедия, последствия которой Фет ощущал всю жизнь. Когда в очередной раз поэт приехал в Березовку, то неожиданно узнал о случившемся. Вот как он сам это описывает:
« – А Лена-то!
– Что? Что? – с испугом спросил я.
– Как! – воскликнул он, дико смотря мне в глаза: вы ничего не знаете?
И видя мое коснеющее недоумение, прибавил: „Да ведь ее уже нет! Она умерла! И, Боже мой, как ужасно“».
Далее в своих воспоминаниях Фет рассказывает трагическую историю со слов как бы другого человека: «Гостила она у нас, но так как во время сенной и хлебной уборки старый генерал посылал всех дворовых людей, в том числе и кучера, в поле… Пришлось снова биться над уроками упрямой сестры, после которых наставница ложилась на диван с французским романом и папироской, в уверенности, что строгий отец, запрещавший дочери куренье, не войдет.
Так последний раз легла она в белом кисейном платье и, закурив папироску, бросила, сосредоточенная вниманием на книге, на пол спичку, которую считала потухшей. Но спичка, продолжавшая гореть, зажгла спустившееся на пол платье, и девушка только тогда заметила, что горит, когда вся правая сторона была в огне. Растерявшись при совершенном безлюдье, за исключением беспомощной девочки сестры… несчастная, вместо того, чтобы, повалившись на пол, стараться хотя бы собственным телом затушить огонь, бросилась по комнатам к балконной двери гостиной, причем горящие куски платья, отрываясь, падали на паркет, оставляя на нем следы рокового горенья. Думая найти облегчение на чистом воздухе, девушка выбежала на балкон. Но при первом же появлении на воздухе пламя поднялось выше ее головы, и она, закрывши руками лицо и крикнув сестpe: «Sauvez les lettres», бросилась по ступенькам в сад… На крики сестры прибежали люди и отнесли ее в спальню. Всякая медицинская помощь оказалась излишней».
Уж очень много так называемых случайностей было в момент трагедии, произошедшей с Еленой: воздушное платье, отсутствие людей в усадьбе, беганье по комнатам вместо отчаянной борьбы с огнем за жизнь и, наконец, ее фраза «Sauvez les lettres» («Спасите письма»). Споры вокруг смерти возлюбленной Фета не умолкают до сих пор, но как тогда, так и сейчас число людей, уверенных, что это было самоубийство, значительно превосходит количество тех, кто считает смерть Елены Лазич несчастным случаем.
Уже через много лет Фет признался Борисову, что виноват в смерти своей возлюбленной: «Я ждал женщины, которая поймет меня, и дождался ее. Она, сгорая, кричала: „Аu nom du ciel sauvez les lettres“ („Ради всего святого, спасите письма“) и умерла со словами: „Он не виноват, а я“. После этого и говорить не стоит. Смерть, брат, хороший пробный камень. Но судьба не смогла соединить нас. Ожидать же подобной женщины с условиями жизни было бы в мои лета и при моих средствах верх безумия…»
После смерти Елены Фет с тоской и безысходностью смотрел в свое будущее: «Итак, мой идеальный мир разрушен давно. Что ж прикажете делать. Служить вечным адъютантом – хуже самого худа – ищу хозяйку, с которой буду жить, не понимая друг друга». Нет сомнений, что Фет любил Елену Лазич и ее смерть стала для него страшным ударом, оправиться от которого ему так и не удалось до конца своих дней. Ведь Елена была не только единственной любовью всей его жизни, она страстно верила в его поэтическую звезду и убеждала писать стихи. Уже на склоне лет, в 1878 году, в стихотворении «Alter еgо» («Второе Я») прозвучало запоздалое признание Фета и осознание той роли, которую Елена Лазич сыграла в его жизни:
После смерти Елены сразу же пошли разговоры о ее самоубийстве: говорили, что она наложила на себя руки, потому что не видела смысла в дальнейшей жизни без Фета. Но доказательств этому, в том числе и предсмертного письма, не было, а если оно и было, то кто-то (возможно, родственники девушки или же сам Фет) заинтересованный постарался, чтобы его содержание не было обнародовано.
Как уже говорилось ранее, в 1856 году вышел указ, согласно которому звание дворянина давал лишь чин полковника. У Фета был теперь только один выход: жениться на богатой девушке.