Итак, императрица Елизавета постепенно начинает заново привыкать к жизни при дворе. В середине февраля впервые за три года она вновь появляется на балу, на который приглашено не более двухсот гостей из числа высшей знати. Все удивлены и обрадованы цветущим видом императрицы. Черты ее лица снова стали тоньше, она опять улыбается так же обворожительно, как и раньше, к ней вернулось ее прежнее обаяние. Однако пересуды вокруг ее персоны не прекращаются. И даже если они не касаются ее непосредственно, то предметом обсуждения становятся события в ее семье. Елизавета сохраняет в душе тесную связь с родительским домом. События последних лет лишь укрепили эту связь, и она не может оставаться безучастной ко всему, что касается прежде всего судьбы ее сестер. Неудачное с самого начала замужество королевы Неаполя переживает острый кризис. Мария не желает возвращаться в Рим к своему супругу и вместо этого неожиданно для всех отправляется в октябре 1862 года в Аугсбург в здешний женский монастырь, где намерена находиться неопределенное время. Ее баварская семья немедленно принимает срочные меры для того, чтобы создать хотя бы видимость ее семейного благополучия. Известие об этом бегстве особенно волнуют императрицу уже хотя бы потому, что при дворе многие проводят параллели с ее поездками на Мадейру и на Корфу и склонны теперь обвинять во всех смертных грехах семью герцога Макса в целом. Ей припоминают неудачную женитьбу старшего сына Людвига, странности в поведении императрицы Елизаветы и, наконец, причуды королевы Неаполя! А какие еще сюрпризы могут преподнести остальные братья и сестры? Императрица ужасно нервничает из-за всех этих разговоров. Со свойственной ей повышенной чувствительностью она относится с недоверием даже к тем, кто этого не заслуживает. Она с преувеличенной антипатией относится ко многим представителям австрийской аристократии и в результате наживает себе множество врагов. Постепенно при венском дворе вокруг Елизаветы складывается крайне враждебная атмосфера, которая помимо ее воли способствует сближению императрицы с венгерской знатью, находящейся на противоположном полюсе. Отныне любой венгр, с которым она встречается, знает, что императрица не одобряет существующего положения, и уже только по одной этой причине относится к ней с особенным почтением. Елизавете льстит внимание к ней венгерской стороны, ее устные и письменные намеки на то, что венграм известно о том влиянии на Франца Иосифа, которым императрица обладает благодаря своему обаянию и красоте, и они не теряют надежды на то, что рано или поздно она сможет уговорить императора пойти навстречу их самым заветным желаниям. Елизавету смущает при этом только то, что она не может по-настоящему проникнуться мыслями и чувствами венгерского народа из-за незнания его языка и самобытной культуры.
Впервые она по-настоящему ощущает этот недостаток, когда ей приходится с трудом объясняться с няней кронпринца. С ее помощью она усваивает азы венгерского языка. Но уже с февраля 1863 года она занимается языком систематически. Если уж Елизавета за что-то берется, то она во что бы то ни стало доводит начатое до конца. Она использует время, необходимое для ухода за ее длинными, золотистыми, дивной красоты волосами, для изучения слов венгерского языка. Затем во время одевания она разговаривает по-венгерски со своей камеристкой, и лишь после этого переходит к гимнастическим снарядам и гантелям, с помощью которых она надеется восстановить свое физическое состояние, серьезно пострадавшее во время болезни, придать своему телу утраченную эластичность и упругость, так необходимые ей для занятий верховой ездой. Конный спорт она предпочитает любым другим занятиям и увлечениям. Придворные художники рисуют по ее просьбе принадлежащих ей великолепных лошадей; рисунки императрица вывешивает в одном из своих салонов. «Моя галерея скакунов» — так она называет эту комнату, куда приводит всякого, кто неравнодушен к этим грациозным творениям природы.