Байрон отослал копию этого стихотворения Аннабелле, но ответом ему было душераздирающее молчание. Затем она без всякого объяснения прислала ему письма, подтверждающие, что Байрон всегда говорил о ней только хорошее, и этим привела его в ярость. Гнев нашел выход в «Зарисовке из частной жизни», направленной против миссис Клермонт, которая, по его мнению, больше всех влияла на его жену и являлась причиной ее безжалостного поведения. Это было самое горькое стихотворение Байрона:
Меррей, которого Байрон опрометчиво попросил напечатать пятьдесят экземпляров для друзей, показал оба стихотворения Каролине Лэм, которая, по всей видимости, вела двойную игру. Услышав о разрыве с женой, она написала Байрону письмо с предложением лгать его супруге, чтобы та не узнала о его страшных грехах того, что знала только Каролина: «…нет ничего даже самого гнусного, что бы я не сделала ради тебя. Пожалуйста, не верь тем, кто говорит, что она все знает. Будь тверд, будь непреклонен… Что бы ни случилось, настаивай на встрече с ней, и у нее не хватит мужества предать тебя, а если хватит, значит, она сам дьявол…»
Когда Байрон, подозревая, что именно Каролина распространяла слухи, не ответил ей, она решила отомстить, объединившись с другой стороной. Она послала несколько писем леди Байрон, намекая на страшные тайны, известные только ей, и умоляя о встрече: «Я расскажу вам нечто такое, что, как только вы упомянете перед ним об этом, он задрожит от ужаса…» Каролина воспользовалась слухом о том, что Байрон собирается отнять ребенка. «Только вы одна из всех людей, близких с ним, будете знать тайну, открыть которую вас может заставить лишь отчаяние».