Когда Людвиг узнавал, что императрица посещала Баварию, он мог бросить все свои дела и, несмотря на погоду, состояние своего здоровья, спешил встретить, поприветствовать свою кузину и потом также проводить. Так, однажды в 1867 году проводив Сиси, Людвиг написал ей: «Ты себе представить не можешь, дорогая кузина, какую радость ты мне доставила. Часы, проведенные недавно с тобой в вагоне, я отношу к самым счастливым в моей жизни, воспоминания о них никогда не угаснут в моей душе. Ты великодушно позволила мне навестить тебя в Ишле, и если моим надеждам вскоре снова увидеть тебя суждено осуществиться, то я буду считать себя самым счастливым человеком на свете. Чувство искренней любви и поклонения, которое я испытывал к тебе еще в то время, когда был сопливым мальчишкой, еще живо во мне и не покинет меня до самой смерти. От всего сердца прошу тебя извинить меня за мою откровенность, но я просто не мог иначе…» Письмо это осталось без ответа.
После того как Людвиг расторг помолвку с ее сестрой Софией, наметилась дистанция в общении императрицы и короля. Она не могла понять поступка Людвига и считала его виновным в разрыве помолвки.
В 1875 году Людвиг узнал о несчастном случае на конной прогулке – Сиси упала с лошади. О своих переживаниях обеспокоенный король делился с Рудольфом: «Если бы ты только знал, как я завидую тебе. Ты счастливчик, потому что имеешь возможность находиться рядом с женщиной, которую я боготворю. Умоляю тебя, напомни прекрасной императрице о том, что есть на свете человек, преданный ей всей душой и готовый рабски исполнять любые ее капризы. Меня очень успокоили заверения, полученные в октябре из Геделле от Луи, в том, что Елизавета отныне будет осторожнее ездить верхом. Еще один несчастный случай с ней я не переживу… Я собираюсь поместить в раму твой портрет, чтобы повесить его рядом с портретом императрицы и одновременно любоваться двумя самыми дорогими мне людьми».
Людвиг и Елизавета верили в мистику, сверхъестественное. У каждого из них было даже свое любимое дерево, с которым они беседовали. Не нужно в этом искать ненормальность и сумасшествие. Это лишь черты большой любви к природе и столь характерной для того времени суеверности обоих. Императрица увлекалась спиритизмом, веря в мир духов и общаясь с умершими, ощущала духовную связь с загробным миром. Похоже, и Людвиг верил в потусторонний мир.
Так, Людвиг писал в дневнике 17 сентября 1884 года о зеркальной галерее в Херренхимзее, в которой, мистически мерцая, отражались тысячи зажженных свечей: «…Каждый из этих многих тысяч огней здесь, в моей зеркальной галерее, – это душа, которая заходит из неземных светлых равнин на землю. Когда дыхание человека задувает их, пламя, только кажется, тухнет. В действительности, невидимые для человеческого глаза, они возвращаются домой. Я знаю этот дом. Я хотел перенести их на землю. Вероятно, я еще также сделаю это. Это царство чистого духа!..» В то время многие августейшие особы и прочая знать были подвержены модному увлечению мистицизмом.
Также важно отметить, что Людвиг был сторонником иллюзий, хотел испытывать их всюду: в замках, в театре, в общении и дружбе с другими людьми, включая женщин. Если кто-то нарушал иллюзию, мир грез лопался, то такой человек мог впасть в немилость у короля, и общение прекращалось. Король вызывал в своем богатом воображении иллюзию присутствия давно умерших французских королей и их фавориток, которые представали ему такими, какими он желал их видеть. Если реальный мир в понятии Людвига не соответствует идеалу, то этот идеальный мир можно вызвать игрой воображения, созданием всевозможных иллюзий.
К концу 1870-х годов общение короля и Сиси, их встречи становятся более частыми. Они встречались в Мюнхене или на Штарнбергском озере в Поссенхофене, Берге или Фельдафинге, несколько раз в сопровождении ее сына Рудольфа или Марии Валерии. В 1880-х годах король и Сиси встречались на острове Роз. Если поначалу она раздражалась его назойливым поведением, то постепенно начала сочувствовать и понимать его, что он, по сути, такой же непонятый одиночка в этом мире, как и она.
Людвиг и Сиси вели романтическую переписку, обменивались стихами, в которых императрица называла себя «чайкой», а Людвиг «орлом». В небольшом замке находился письменный стол с секретным ящиком, к которому только они оба имели ключи. Там они оставляли друг для друга письма, если не встречались лично.
Также Людвиг называл Сиси «голубкой». Альфонс Швайггерт размышляет по этому поводу: «Не напоминала ли она Лоэнгрину голубку Грааля, которая похитила лебединого рыцаря в челне от земных низменных пошлостей в небесные чертоги святости, где Людвиг отдавался своим неисполнимым мечтаниям? Это дало ему сначала в Хоэншвангау „этот земной рай, который я заполняю своими идеалами, и я поэтому счастлив“. Но еще более райским должен был стать новый замок Нойшванштайн, который был посвящен во всем как Лоэнгрину, так Тангейзеру».