Десятилетний Байрон так сильно влюбился в свою кузину Мэри Дафф, что, услыхав о ее помолвке, впал в истерический припадок. В 1799 году он поступил в школу доктора Глени, где пробыл два года и все время лечил свою больную ногу, после чего достаточно поправился, чтобы надевать сапоги. В эти два года он учился очень мало, зато прочел всю богатую библиотеку доктора. Перед отъездом в школу в Хэрроу Байрон снова влюбился — в другую кузину, Маргариту Паркер. Страсть к близкородственным связям была очень распространена среди романтиков. Впрочем, подобное поведение вполне отвечало духу эпохи: к примеру, запретная любовь брата к сестре составляет основное содержание автобиографической повести Шатобриана «Рене» (1802).
В 1801 году Байрон уехал в Хэрроу; мертвые языки и древность вовсе не привлекали его, но зато он с огромным интересом прочел всех английских классиков и вышел из школы с большими познаниями. В школе он славился рыцарским отношением к товарищам и тем, что всегда заступался за младших. Во время каникул 1803 года он опять влюбился, но на этот раз гораздо серьезнее, чем прежде — в мисс Чаворт. Мэри Энн Чаворт (1786–1832) была также родственницей Байрона и стала самой сильной его юношеской любовью. В грустные минуты своей жизни он нередко жалел, что она отвергла его. Замужество Чаворт стало для Байрона тяжелым испытанием, и в результате душевного страдания в нем проснулся тончайший лирик. Вот яркий пример того: «Отрывок, написанный вскоре после замужества мисс Чаворт»:
В Кембриджском университете Байрон углубил свои научные знания. Но больше он отличился искусством плавать, ездить верхом, боксировать, пить, играть в карты и т. п., поэтому лорд постоянно нуждался в деньгах и, как следствие, «влезал в долги».
В 1809 году поэт был вынужден покинуть родную Великобританию. И слава богу, потому что оскорбленный им Т. Мур отправил Байрону вызов на дуэль. Только неожиданный отъезд снял напряжение. К тому же, еще будучи студентом, Байрон пристрастился к карточным играм и алкоголю. Нетрудно догадаться, что подобные увлечения постоянно проделывали существенные прорехи в скудном бюджете Джорджа Байрона. Окончилось все тем, что поэт решил просто сбежать от заимодавцев и кредиторов, терявших терпение. Заодно он избежал и опасной дуэли. Вместе с приятелем Джоном Хобхаусом Байрон отправился в путешествие. Друзья повидали Грецию, Испанию, Португалию и другие страны. Главным результатом поездки стала поэма «Паломничество Чайльд-Гарольда». Это романтическое повествование о путнике, который прошел через разочарование в окружающем мире и пережил полное крушение юношеских представлений о мире. Вот она, извечная тема романтического странствия, «охота к перемене мест, не многих добровольный крест». Голубой цветок Новалиса и здесь дал знать о себе. Безусловно, главный герой поэмы — отражение автора, его чувств и печалей.
В ноябре 1813 года Байрон сделал предложение мисс Анне Изабелле Милбенк, дочери Ральфа Милбенка, богатого баронета, внучке и наследнице лорда Уэнтворта. «Блестящая партия, — писал Байрон Муру, — хотя предложение я сделал не вследствие этого». Он получил отказ, но мисс Милбенк выразила желание вступить с ним в переписку. В сентябре 1814 года Байрон повторил свое предложение, и оно было принято, а в январе 1815 года они обвенчались. В декабре у Байрона родилась дочь по имени Ада, а в следующем месяце леди Байрон оставила мужа в Лондоне и уехала в имение к отцу. С дороги она написала мужу ласковое письмо, начинавшееся словами: «Милый Дик» и подписанное: «Твоя Поппин». Через несколько дней Байрон узнал от ее отца, что она решилась никогда более к нему не возвращаться, а вслед за тем сама леди Байрон известила его об этом. Через месяц состоялся формальный развод. Байрон подозревал, что жена разошлась с ним под влиянием его собственной матери. Леди Байрон приняла всю ответственность на себя. Жена поэта призывала на консультацию доктора Больи и спрашивала его, не сошел ли ее муж с ума. В этом браке родилась дочь. Примечательно, что дочь Байрона Аду называют первым программистом в мире. Удивительно, что подобное занятие привлекло женщину того времени, но факт остается фактом, Ада Лавлейс (взявшая фамилию мужа) составила первую программу для вычислительной машины, созданной Чарльзом Бэббиджем.