Владения семьи Ракоци были постепенно поглощены расширяющей свои границы Австрийской империей. Прежде чем умереть в Турции, в Родесто, в 1734 году, предполагаемый отец Сен-Жермена обеспечивал пропитанием свою семью исключительно за счёт недвижимости, пожалованной ему королём Франции Людовиком XIV.
Прослышав, что два его брата, дети княгини Гесс-Ванфридской, были отданы под опеку императора Карла VI и получили титулы Святого Карла и Святой Елизаветы (sic!), он объявил: «Отлично, тогда я буду называть себя Святым Германом — „святым братом“!»
Считается, что Сен-Жермен родился в 1710 году, однако, согласно двум разным источникам, в этом году его уже видели в Венеции, причём выглядел он на сорок пять — пятьдесят лет. Один из источников, барон де Глейхен, писал: «Рамо и некий престарелый родственник французского посланника в Венеции подтвердили, что встречали Сен-Жермена в Венеции в 1710 году и что он имел внешность человека примерно пятидесяти лет от роду». Второй — многократно цитируемый анекдот о том, как графиня фон Георги встретила Сен-Жермена при французском дворе и спросила, не был ли его отец в Венеции в 1710 году.
— Нет, мадам, — отвечал ей Сен-Жермен. — Я потерял своего отца задолго до этого. Но в конце прошлого и начале нынешнего столетия я сам жил в Венеции. Я имел честь представиться вам там, и вы были столь добры, что выразили восхищение парочкой баркарол моего сочинения, которые мы исполняли с вами вместе.
— Простите, но это невозможно, — возразила графиня. — Граф де Сен-Жермен, коорого я знала в те годы, был по меньшей мере сорока пяти лет от роду, а вы пребываете в этом возрасте сейчас.
— О, мадам, я ведь очень стар, — отвечал Сен-Жермен с улыбкой.
— Тогда вам должно быть больше ста лет.
— В этом нет ничего невозможного, — сказал ей Сен-Жермен и начал перечислять такие подробности их знакомства в Венеции, которые могли быть известны только им двоим — к величайшему замешательству графини.
Этот анекдот содержится в «Хрониках бычьего глаза», принадлежащих перу вдовствующей графини фон Б., относящихся к событиям 1723 года, но опубликованных только в 1750-м.
Ещё одно свидетельство таинственного обаяния таланта Сен-Жермена содержится в письме графа Карла Кобенцля к князю Кауницу, премьер-министру австрийского двора, написанном в Брюсселе 8 апреля 1763 года: