Только осенью постепенно стало меняться отношение Пушкина к Дантесу. В этом был виноват не столько Дантес, сколько расплодившиеся слухи и сплетни вокруг имени первой красавицы и модного кавалергарда. Слухи один другого нелепей распускали враги и недоброжелатели поэта, которых было немало. Явился случай припомнить ему всё: и злые эпиграммы, и заносчивость, и «Гавриилиаду», и бывшие «амуры» с чужими женами, и карточные долги, и много чего еще — вплоть до литературных разногласий и критики. На этой волне возникли даже намеки на связь Натали с царем — покровителем и благожелателем Пушкина. Сам государь впоследствии вспоминал: «Под конец его (Пушкина. — Н. Г.) жизни, встречаясь очень часто с его женою, которую я искренне любил и теперь люблю, как очень хорошую и добрую женщину, я раз как-то разговорился с нею о комеражах (пересудах, болтовне — фр.), которым ее красота подвергает ее в обществе; я советовал ей быть как можно осторожнее и беречь свою репутацию, сколько для себя самой, столько и для счастья мужа при известной его ревнивости. Она, верно, рассказала об этом мужу, потому что, встретясь где-то со мною, он стал меня благодарить за добрые советы его жене. «Разве ты мог ожидать от меня другого?» — спросил я его. «Не только мог, Государь, но признаюсь откровенно, я и Вас самих подозревал в ухаживании за моею женой».
Сплетничали о Натали, но и о Дантесе распространялись самые невероятные слухи, потому что происхождение его было малоизвестно. Некоторым приходило в голову, что связь его с приемным отцом была противоестественного свойства, иначе говоря, что они были любовниками.
Дворянство род Дантесов получил от Жана-Генриха Дантеса, крупного земельного собственника и промышленника, который и приобрел имение во французском Сульце, ставшее родовым гнездом. Это был прадед Жоржа Дантеса. Его предки ревностно служили своим королям и вступили в родственные отношения со многими родовитыми семьями.
Мать — графиня Гацфельд своим родством соединила семью с русской аристократией. Ее тетка была замужем за графом Францем Нессельроде, принадлежащим к той же родственной ветви, что и русский граф Карл Нессельроде, канцлер и долголетний министр иностранных дел при Николае Павловиче; другая тетка вышла замуж за графа Мусина-Пушкина, русского дипломата, бывшего посланником в Стокгольме. Его отец — Жозеф-Конрад Дантес получил баронский титул при Наполеоне I и был верным легитимистом. В 1823–1829 годах он был членом палаты депутатов. Революция 1830 года заставила его уйти в частную жизнь и вернуться в Сульц.
Жорж Дантес родился в 1812 году, был третьим ребенком в семье и первым сыном.
Первоначально он учился в колледже в Эльзасе, потом в Бурбонском лицее, затем был отдан в Сен-Сирскую военную школу, но кончить курса молодому барону не удалось: грянула Июльская революция, которая лишила престола законного короля Карла X. Молодой Дантес примкнул к той группе учеников школы, которая вместе с полками, сохранившими верность Карлу X, пыталась защитить своего короля. Отказавшись служить Июльской монархии, Дантес был вынужден покинуть школу и несколько недель числился партизаном, которые в небольшом количестве собрались в Вандее вокруг герцогини Беррийской.
После вандейского эпизода Жорж Дантес вернулся к отцу в Сульц и нашел его «глубоко удрученным политическим переворотом, разрушившим законную монархию, которой его род служил столько же в силу расположения, сколько в силу традиции». Июльская монархия ко всему прочему сильно подорвала материальное благосостояние семьи Дантесов. На попечении отца шестерых детей Жозефа-Конрада Дантеса оказалась вся его семья, семья его старшей дочери и старшей сестры-вдовы с пятью племянниками. Смерть баронессы Дантес в 1832 году усугубила уныние родного очага.
Жорж Дантес, которого отделяли от тогдашнего правительства политические взгляды его семьи, решил искать службы за границей. Это был обычай, распространенный в то время. Проще всего было устроиться в Пруссии… Благодаря покровительству наследного принца Вильгельма он мог быть принят в полк в чине унтер-офицера. Но для воспитанника Сен-Сирской школы, выходившего из ее стен после двухлетнего обучения офицером, это было бы понижением, и Жорж Дантес отказался. Наследный принц, будущий германский император, женатый на племяннице Николая I, посоветовал Дантесу отправиться в Россию, в которой царь должен был оказать покровительство французскому легитимисту. Рекомендательное письмо принца было адресовано генерал-майору Адлербергу, директору Канцелярии военного министерства, одному из ближайших Государю людей.