Однако именно это выставленное папой требование, что выбранный королем только после одобрения этого выбора папой может называться королем, дало повод для еще одного последнего столкновения между императорской и папской властью, в течение которой Людовик Баварский, на которого в 1324 году была наложена опала, не только апеллировал к церковному собору, но и попытался, даже если и напрасно, созвать подобный собор. На народном собрании в Риме он объявил папу Иоанна XXII (Johannes XXII) (1316 — 1334) как нарушителя спокойствия, еретика и государственного преступника низложенным, повелел выбрать минорита Пьетро Райналдуччи (Pietro Rainalducci) новым папой, а также 17 января 1328 года четырем представителям римского народа поднести себе корону императора и двум опальным епископам помазать его на царство. Публицистическое оружие ему предоставили минориты, поссорившиеся в папой из-за так называемого «спора о бедности» (Armutsstreit), и, не в последнюю очередь, Марсилий Падуанский (Marsilius von Padua). Однако, когда Людовик весной 1330 года возвратился в Германию, очень скоро стало ясно, что подобный совершенно радикальный разрыв со средневековым представлением о взаимодействии королевской и церковной властей, Империи и папства, был преждевременным, и, в связи с этим, Генрих VII даже более соответствовал представлениям своего времени.
Курфюрст-архиепископ Балдуин старался уклониться от решения в споре короля Людовика и папы Иоанна XXII. Он не опубликовал буллу, налагающую опалу на короля, он также отказался участвовать в предпринятом папой Иоанном низложении Людвига и в плане выбора немецким королем короля Карла IV Французского, в 1323 году женившегося на дочери Генриха VII Марии. Эта выжидательность очень пригодилась курфюрству Трирскому, поскольку в эти годы Балдуин с большим успехом обратился к расширению его территорий: в различных междоусобицах подчинил он себе небольших землевладельцев и рыцарей в Айфеле (Eifel), в Хунсрюке (Hunsrueck) и в Вестервальде (Westerwald) и установил более протяженные границы посредством меча или денег, возведения пограничных и защитных крепостей и принятием ленников. За то, что во время его усобиц графиня Лоретта фон Шпонхайм (Loretta von Sponheim) также однажды опередила его и заключила его в Штаркенбург (Starkenburg), он должно быть не особенно на нее обиделся. Внутри его территорий он стремился защитить и сделать используемым добытое при помощи создания структурно четкого управления, причем в сфере управления финансами ему служили знания и связи евреев. Сам он заботился об упорядочении и выявлении архива, о чем и сегодня свидетельствуют четыре так называемых «Балдуинеады» (Balduineen), к которым мы еще вернемся в связи с иллюстрированным циклом.