Установился новый порядок, и до 828 г. дела шли неплохо. Графы, епископы и их подчиненные верно несли свою службу. Марки строго охранялись, войны происходили только на границах; при императорском дворе господствовало большое оживление; ко двору постоянно приезжали посольства — греческие, римские, сарацинские, болгарские. Установился обычный и правильный ход дел. По окончании съезда вельмож император отправлялся в поездки либо выступал в поход; затем наступала пора осенних охот в Вогезах или Арденнах и зимнее пребывание в Аахене, где тоже не сидели без дела. С 819 г. Людовик вступил во второй брак с дочерью баварского графа Вельфа Юдифью. Эта женщина приобрела большое влияние на легко поддававшегося ему императора. От Юдифи в 823 г. у императора родился сын Карл: в том же году окончательно определилась структура государственной власти, поскольку старший сын от первого брака Лотарь был коронован в Риме императорской короной. Однако необходимо было наделить владениями и младшего сына, и еще 6-летним мальчиком по указу Людовика он был возведен в титул герцога Аламаннского, откуда родом была семья его матери. Таким образом, при дворе образовались две партии — партия королевы и ее сына и партия трех старших сыновей Людовика. Во главе первой вскоре встал граф Бернард, до этого занимавший трудный пост правителя в Барселоне, а теперь хранитель государственной казны, по древнегерманскому обычаю состоявшей под надзором супруги императора.
Средства, к которым прибегли старшие братья, не были тонкими. Лотарь, которому действительно пришлось наделить землями малолетнего брата Карла, был этим очень недоволен и вместе с братом Пипином восстал против отца, опираясь на его распоряжение о престолонаследии от 817 г. Перевес сил оказался на их стороне, и они обвинили графа Бернарда в позорной связи с императрицей и в том, что он околдовал императора. Они вынудили императрицу удалиться в монастырь, брат Людовик примкнул к ним, а императора пытались заставить отречься от престола и уйти в монастырь. Император Людовик этому воспротивился и в 831 г. на сейме, собравшемся в Нимвегене, вернул себе власть. Восточнофранкская и саксонская знать, а также двое младших сыновей, то ли завидовавших Лотарю, то ли не доверявших ему, были здесь на его стороне. Юдифь и ее братья были возвращены из монастыря, а главные вожди партии Лотаря приговорены к смерти. Однако император помиловал их, поскольку после печального ослепления племянника не решался на кровавые приговоры. Вскоре и граф Бернард, герцог Септиманский, приобрел прежнюю силу и чтобы очиститься от возведенного на него обвинения, он предложил своим противникам решить дело «судом Божьим», т. е. судебным поединком. Но никто не решился вступить с ним в бой.