Отец Анны Карловны, Карл Людвиг (позднее – Карл Иванович) Таблиц, происходил из семьи немецких евреев, переселившихся в середине XVIII века из Пруссии в Россию. Карл Людвиг, талантливый естествоиспытатель, принимал участие в нескольких научных экспедициях – в Южной России, в Персии, в районе Каспийского моря. С 1783 года помогал светлейшему князю Потемкину обустраивать Крым, что нашло отражение и в его научных трудах – «Физическое описание Таврической области», «Географические известия о Тавриде», переведенных на несколько иностранных языков. Восемь лет, с 1788 по 1796 год, Карл Таблиц служил вице-губернатором Таврического наместничества, а позднее, в начале 1800-х годов, был назначен директором государственных лесов в лесном департаменте Министерства финансов. Заслуги его перед Россией были отмечены званием почетного члена Петербургской академии наук, чином тайного советника, должностью сенатора.
И если любовь к музыке Александру Серову, как и его сестре Софье, привил отец, то другая страсть мальчика – к книгам по естественной истории, особенно к сочинениям Бюффона, передалась, вероятно, от естествоиспытателядеда.
Благодаря частным урокам с талантливой пианисткой Александр Серов в восемь-девять лет уже свободно читал ноты с листа. Но отец отнюдь не стремился воспитать из него профессионального музыканта. Николай Иванович хотел, чтобы сын пошел по его стопам и сделал государственную карьеру.
В пятнадцать лет, успев поучиться в гимназии, Серов по велению отца поступает в весьма престижное Училище правоведения, только что открывшееся под эгидой принца Ольденбургского. В стенах училища интерес к музыке всячески поощрялся, и здесь состоялась встреча двух музыкально одаренных юношей, определившая их дружбу на долгие годы. Александру Серову было тогда шестнадцать лет, Владимиру Стасову – двенадцать. Сближению способствовало и то, что знакомы друг с другом были и их отцы; они входили в комиссию по постройке Смольного собора: архитектор Василий Петрович Стасов проектировал собор, а отец Серова представлял в комиссии Министерство финансов.
Вспоминая впоследствии друга юности, Стасов писал: «С Серовым можно было прожить сто лет и никогда не соскучиться. Я был в великом восторге от всей вообще даровитости и многоспособности его. Быть с ним – это было для меня постоянно истинным наслаждением».
По окончании училища двадцатилетний Александр Серов зачисляется в канцелярию 5-го уголовного департамента Сената в чине IX класса (титулярный советник). Отец его, Николай Иванович, вполне доволен сыном: конечно, чиновничья служба непроста, но при упорном труде в конце концов приносит неплохие дивиденды.
Между тем сам Александр Серов думает только о музыке. В Сенат и обратно он ходит пешком и по пути проигрывает возникающие в голове мелодии.
Его первые опыты музыкальной композиции заслуживают одобрение принца П. Г. Ольденбургского, который покровительствует одаренному юноше.
Стасов и Серов, такие разные и внешне и по характерам, еще больше сближаются. Обмен мыслями и впечатлениями от всего прочитанного, увиденного и услышанного не прекращается между друзьями почти ни на один день – в эпистолярной форме. Оба не пропускают ни одного концерта заезжих знаменитостей, и много лет спустя Стасов вспоминал, как в 1842 году они с замиранием сердца слушали выступление приехавшего в Петербург Листа и, покоренные, очарованные искусством великого пианиста и композитора, долго бродили, не чувствуя усталости, по улицам, пока не решились пойти к Листу и лично выразить ему свои восторги.
В начале 1842 года состоялась судьбоносная встреча Серова с М. И. Глинкой, о чем Александр сообщает в письме Стасову: «О, я в него верую, как в Божество!» Факт их знакомства и дарование юного музыканта отметил в своих «Записках» и Глинка. Серов после смерти великого композитора написал «Воспоминания о Глинке», проникнутые чувством восхищения его музыкальным гением.
Во второй половине 1840-х годов перипетии чиновничьей службы заносят А. Н. Серова в Крым: он назначается товарищем (заместителем) председателя симферопольского уголовного суда. Лет 60 назад в том же симферопольском уголовном суде служил советником и дед А. Н. Серова Карл Иванович Габлиц.