Первое время жизнь в Хартфорде была достаточно комфортной. Несмотря на то что, когда в возрасте 22 лет умерла его сестра Элизабет, Альфреду было девять, в своей автобиографии он пишет, что был слишком мал, чтобы сильно переживать по этому поводу. Ближе всего по возрасту и интересам ему были Джон и Фанни. Зарабатывая частными уроками, Томас поначалу мог оплачивать приличное образование для своих детей. Уильям стал учеником землемера, а позже устроился работать в большую строительную компанию в Лондоне. Джон тоже перебрался в Лондон и работал помощником в другой строительной компании, а Фанни уехала в Лилль, чтобы выучить французский язык и стать учительницей. Альфреда послали пансионером в хартфордскую классическую гимназию. Но затем семья снова скатилась в финансовую яму. Мэри Уоллес унаследовала небольшое состояние, которое было передано в доверительное управление мужу ее сестры, юристу Томасу Уилсону. Уилсон обанкротился, и капитал Мэри, как и доходы от него, были заморожены на несколько лет, пока длились судебные тяжбы. Альфред смог окончить учебный год в гимназии только потому, что вел уроки в младших классах в счет платы за обучение (около 25 гиней в год). Перспектив продолжить образование не было, и на Рождество 1836 г., незадолго до своего четырнадцатилетия, он бросил школу, чтобы выбиться в люди. Его родители переселились в Ходдесдон, в дом поменьше, а Альфред уехал к брату Джону в Лондон. На дворе стоял 1837-й, год восшествия на престол королевы Виктории. Дарвин меньше года назад вернулся в Англию и уже размышлял об эволюции, хотя эссе Томаса Мальтуса он прочтет только в следующем году.
Живя с Джоном, Альфред проводил много вечеров в так называемом «доме науки», который являлся чем-то вроде института механики, где он мог читать книги и журналы, а также общаться с разными людьми. Он уже был хорошо начитанным, и это способствовало формированию его представлений о несправедливости общественного уклада; он начал задумываться, как присутствие в мире зла и бед можно примирить с существованием благонамеренного бога. Но летом эти каникулы закончились, и Альфред стал учеником землемера при брате Уильяме. Это была интересная работа на свежем воздухе, которая давала Альфреду возможность на практике изучать геологию и ботанику, хотя братьям едва удавалось сводить концы с концами. С некоторыми перерывами (во время одного из них Альфред ненадолго стал учеником часовщика, но эта профессия ему не понравилась) это продлилось до начала 1844 г. В тот период Уоллес прочитал «Путешествие на корабле „Бигль“» Дарвина и «Основные начала геологии» Лайеля. Тем временем, Дарвин под впечатлением от работы Мальтуса начал формулировать свои идеи об эволюции в записных книжках, о чем не знал ни Уоллес, ни кто-либо другой. В одной из них он писал:
Можно сказать, что существует сила, которая, подобно сотне тысяч клиньев, пытается втиснуть любую приспособившуюся структуру в зазоры в экономике Природы или скорее создать такие зазоры, вытесняя более слабых. Конечной целью всех таких вклиниваний должны являться отбор подходящей структуры и адаптация ее к изменениям.
А в октябре 1838 г. он суммировал:
Все это могут объяснить три принципа:
1. Потомки похожи на предков.
2. Тенденция к небольшим изменениям, особенно физическим.
3. Высокая плодовитость соразмерна родительской поддержке.