Открытый разрыв между Вагнером и Пфистермайстером произошел в октябре 1865 года, когда Вагнер попросил у короля взаймы 40 тысяч гульденов. Пфистермайстер всячески отговаривал Людвига от исполнения просьбы композитора. Дабы унизить композитора в глазах общественности, Вагнеру из казны кабинета выдали предоставленный займ не в купюрах, а в монетах, и, чтобы увезти деньги, Козиме пришлось забирать их двумя каретами и несколькими носильщиками. Людвиг узнал об этом позорном инциденте лишь спустя несколько месяцев от Козимы.
Последняя идиллическая неделя мюнхенского периода с 11 по 18 ноября 1865 года прошла в Хоэншвангау. Король и композитор совершали конные прогулки по живописным окрестностям, Вагнер играл для Людвига на фортепиано, читал зарождающиеся мемуары.
Учитывая длительную и растущую благосклонность короля к Вагнеру, кабинет министров почувствовал, что следует привлечь Вагнера на свою сторону. В баварских политических кругах появилась фракция, которая видела в Пруссии будущего лидера Германии. К этой горсти относился занятый в то время в секретариате кабинета министров Иоганн Лутц, который попытался однажды привлечь к их кругу и подкупить Вагнера. Когда Вагнер был в Хоэншвангау, Лутц завел разговор о том, что политика баварского правительства должна идти в ногу с Бисмарком и прусской тенденцией, поскольку на Австрию они не могли рассчитывать, а еще меньше должны были иметь дело с немецким парламентом. Вагнер не клюнул на удочку, а ответил Лутцу, что он далек от баварской политики и плохо осведомлен в государственных вопросах. Вагнер 26 ноября сообщал в письме Людвигу: «То что ваш кабинет, в явном согласии с господином фон Пфордтеном, полностью склонен присоединиться к пожеланиям Бисмарка, я знаю из откровенных заявлений самого господина Лутца».
Даже если бы Вагнер присоединился к их политическому кругу, то при первой возможности, когда он им больше был бы не нужен, они без всякого зазрения совести оставили бы его за бортом. И теперь они видели в нем большую угрозу, от которой нужно было избавиться.
Нельзя не затронуть краткую биографию Иоганна фон Лутца, который сыграл важную роль в жизни баварского короля и был ключевой фигурой в отстранении от власти Людвига в 1886 году. Иоганн родился 4 декабря 1826 года во франконском Мюннерштадте в семье школьного учителя музыки, набожного католика. Его отец Иосиф наметил для сына путь в духовенство, поэтому Иоганн в детстве посещал гимназию, руководимую монахами-августинцами. Он не проявил особого усердия и энтузиазма в учебе, навязанной против его воли. Все это только подействовало с точностью до наоборот и отдаляло Иоганна от католичества. Его преподаватель религии монах-августинец отметил развитые в юном Иоганне самомнение, гордость и высокомерие по отношению к учителям. Закончив школу, Лутц все дальше отчуждался от католической церкви. В 1843–1848 годах Иоганн изучал право в Вюрцбургском университете. В 1852 году вступил в брак с протестанткой Каролиной Ройсс (1828–1865). Сына и дочь от этого брака Лутц крестил и воспитал также в протестантстве, что привело его к открытому конфликту с католической церковью. Честолюбивый, усердный и трудолюбивый Лутц в 1854 году получил должность асессора при районном и городском суде Нюрнберга. В 1862 году Иоганн перешел в министерство юстиции в Мюнхене, через год был приглашен как помощник-секретарь в королевский секретариат кабинета министров, где его заметил Максимилиан II. Со вступлением Людвига II карьера Лутца поползла вверх, и он даже получил баварский орден за заслуги перед короной и возведен в рыцарское сословие. С 1865 года Лутц стал Oberappellationsrat и при этом сохранял свой секретарский пост в кабинете министров. С 1866 года Иоганн – уже главный секретарь кабинета министров. Он пришел на смену уволенному Пфистермайстеру, который оказался у Людвига в немилости из-за высланного из Баварии Вагнера. На этой должности Лутц заслужил полное доверие короля и мог оказывать решительное влияние на баварскую политику. Еще через год Лутц получил место министра юстиции при содействии Хлодвига Гогенлоэ-Шиллингсфюрста, который с 1866 по 1870 год был председателем Совета министров. В 1869 году Лутц получил должность государственного министра внутренних дел по церковным и школьным делам.
На переговорах при вступлении Баварии в Германский союз и на Версальских переговорах Лутц играл значительную роль, где тогда и завязались его хорошие отношения с Бисмарком. В 1870-х годах Лутц выступил сторонником политики культуркампфа, проводимой Бисмарком.
После смерти своей жены Лутц в 1867 году вступил во второй брак с протестанткой Анной фон Шмидт-Остинг (1838–1884). Также родившиеся дети в этом браке воспитывались в протестантской вере.
С 1880 года король Людвиг назначил Лутца председателем Совета министров, на которой он пробыл до своей смерти в 1889 году. В 1883 году Лутцу был пожалован королем наследственный титул барона.