Герберт тяжело переживал смерть матери и свою болезнь. Мальчик, страдающий от множества комплексов, поначалу недоверчиво относился к мачехе. Ее биограф Ганс-Отто Мейснер, рассказ которого опирается прежде всего на разговоры с Элло Квандт, золовкой Магды и теткой Герберта, пишет, что мачехе с трудом удавалось относиться к мальчику с той же открытостью и преданностью, как к его старшему брату. Ребенок это чувствовал и страдал. По словам же Гюнтера Квандта, напротив, Магда Квандт «с равным вниманием и любовью относилась ко всем детям». Это не изменилось и с рождением 1 ноября 1921 года третьего сына, появившегося на свет к концу их первого года совместной жизни.
Гаральд был первым и единственным общим ребенком Магды и Гюнтера Квандтов. Как и двое его сводных братьев, он получил имя, начинавшееся на букву Г (в немецкой транскрипции — Н: Harald, Helmut, Herbert). К рождению сына мультимиллионер поставил у постели своей жены букет цветов. Не зная, что ей подарить, он спросил совета у тещи, и она посоветовала ему купить туалетный набор. И Квандт поручил кому-то из служащих приобрести расчески и щетки.
Как многим богатым мужчинам, ему проще было оперировать большими суммами, чем маленькими. В частной жизни в Гюнтере курьезным образом уживались щедрость со скупостью: он предпочитал простые блюда и давал своей жене мало денег на домашние и карманные расходы. Все траты она должна была записывать в книгу. Некоторое время спустя она с гордостью показала своему мужу эту книгу, и он повел себя как контролер: молча проверил страницу за страницей и подписал красными чернилами: «Прочитано и одобрено, Гюнтер Квандт».
К тому времени семья уже покинула виллу на Кайзерштрассе, где Квандт жил еще с первой женой. В 1920 году он купил более роскошный земельный участок на Луизенштрассе, 2, который также был расположен на Грибнитцзее. Хозяйством занимались повариха, горничная, садовник и шофер. Экономку Квандт уволил, когда в доме появилась Магда. У Герберта был домашний учитель. Когда родился Гаральд, Квандт позволил жене взять няню.
Если до своего замужества Магда Квандт мечтала играть важную общественную роль рядом с идущим в гору промышленным магнатом, то теперь это осталось лишь мечтой. Квандт был не очень общителен и светская жизнь его не интересовала. Напротив: чрезвычайная сдержанность, с которой он осуществлял свои идеи, не предполагала тщеславной демонстрации его растущего богатства, его власти и широких связей. Он не любил пышные праздники и большие обеды, рассматривал их как пустую трату времени и в свет выходил только, если этого нельзя было избежать. Но в этих редких случаях он часто производил впечатление очаровательного и остроумного собеседника.
К вечеру Квандт уставал. Однажды с ним произошел случай, над которым смеялись все, кроме семьи Квандт. Он, по желанию Магды, приобрел билеты на ревю в Admirals-Palast. Во время представления танцовщицы покинули сцену, чтобы попросить мужчин из публики застегнуть им на спине пуговицы только что наброшенного костюма. Прожекторы следовали за девушками, одна из них остановилась перед крепко спавшим Квандтом, проснувшимся от яркого света прожектора под аплодисменты и смех зала.
Магда Квандт не была домашним созданием: не умела готовить, и лавры искусной поварихи ее не прельщали. Она старалась содержать дом в порядке, но не более того. Магда была культурной, образованной женщиной с хорошими манерами, знала языки, у нее был свой элегантный стиль поведения. Но, к ее большому разочарованию, она почти не имела возможности проявить в браке свои способности. Вместо порхания в свете рампы на глазах многочисленной публики судьба уготовила ей жизнь на уединенной вилле на берегу озера. Летом она вдобавок должна была заботиться о родителях Квандта, которые каждый год приезжали на несколько недель в гости в Бабельсберг. Молодая современная женщина оказалась рядом с консервативным патриархом.
Для своих сыновей Гюнтер Квандт был любящим щедрым отцом. Летом 1921 года, когда ему было уже 40 лет, он предпринял первую длительную поездку на новой машине с Гельмутом и Гербертом. «Mercedes» вез их в сторону Броккена, в Вильгельмсхее и через Вейссенбург в Мюнхен. Одиннадцатилетнего Герберта отец заставил выпить в погребке домашней пивоварни две кружки пива и позже радовался тому, что обычно замкнутый мальчик по дороге в гостиницу начал петь.
У Магды после рождения Гаральда появились первые проблемы со здоровьем. Летом 1922 года супруги поехали на лечение в Бад-Киссинген. Отпуск проходил во вкусе Квандта: ежедневно он предпринимал длительные прогулки с жившим в той же гостинице «Faurst Bismark» генеральным директором Wintershall Ростергом. Магда Квандт вынуждена была сидеть на диете, что свидетельствует о проблемах с пищеварением.