Осенью Байрон не вернулся в Кембридж потому, что финансовое положение не позволяло ему вести желаемый образ жизни, и частично потому, что он приятно проводил время в Саутвелле. Он заключил перемирие с миссис Байрон, что делало его жизнь в этом городе вполне сносной. Дом семьи Пигот стал его вторым домом. Он уже приобрел привычку поздно ложиться и поздно вставать, которой не изменял всю жизнь. Его любимыми занятиями были плавание и стрельба в цель из пистолета, чем он не переставал заниматься до самой смерти.
Байрон не мог не предвидеть отклика в уважаемых кругах Саутвелл а на такие вот строчки:
Когда преподобный Томас Бичер, которому Байрон подарил экземпляр, возразил, что «описание слишком откровенно», Байрон ответил ему стихами. Он оперировал теми же аргументами, что в будущем при защите «Дон Жуана»: его муза – «правда». Но в тот же день он забрал все экземпляры, подаренные друзьям, и сжег их. Сохранились только четыре томика. Преподобный Томас Бичер оставил свой экземпляр.
Вскоре Байрон уже работал над следующим сборником, который попытался сделать «совершенно правильным и необычайно целомудренным». Искусственность стиля не позволила ему раскрыть своего ярко выраженного таланта реалистического описания, использовать юмор и колкую сатиру. «Стихи по разным случаям» вышли в свет в январе 1807 года.
6 января Байрон был в отеле «Дорант» на Элбермарл-стрит в Лондоне, пытаясь выручить немного денег и распространяя среди друзей экземпляры своего сборника. Миссис Массингберд – его посредница в денежных делах – устроила так, что Байрон смог получить 3000 фунтов с обязательством выплатить 5000 фунтов по достижении совершеннолетия. После выплат по предыдущему займу у Байрона осталось очень мало денег, и в конце января он вернулся в Саутвелл. Вскоре он опять попал в беду. Он неосторожно сошелся с Джулией Ликрофт. По словам Хобхауса, «семья закрывала глаза на близкие отношения Байрона с одной из дочерей, надеясь опутать его узами неравного брака».
Вероятно, чтобы избавиться от последствий своего галантного поведения, Байрон стал следовать строгому распорядку, в течение нескольких месяцев придерживаясь его с завидным рвением. За это время ему удалось уменьшить свой вес, значительный в период учебы в Хэрроу, до нормального, который он и сохранял с небольшими колебаниями до того, как в 1818 году в Венеции ослабил бдительность и снова поправился. Осенью 1806 года его вес был впечатляющим для юноши ростом пять футов восемь с половиной дюймов. Спартанский режим, помимо диеты, заключался в «неимоверных физических нагрузках, горячих ваннах и лекарствах».
Финансовое положение Байрона оставляло желать лучшего. Чтобы он не связывался с ростовщиками, мать заняла у родственников в Ноттингеме 1000 фунтов. В промежутках между любовными романами и стоихотворчеством Байрону удавалось почти постоянно подавлять в себе чувство мрачного отчаяния. Преобладание грустных мотивов в его творчестве создавало ложный образ угрюмого юноши. На самом деле он был полон жизненной энергии и порой, по словам Элизабет Пигот, вел себя как мальчишка.