В это время до Мирабо доходят слухи об оскорблении, нанесенном его сестре, г-же де Кабри. Возмущенный дворянин самовольно покидает место принудительного поселения, чтобы сразиться с обидчиком на дуэли. Но вернуться назад в Маноск Оноре не успел: стараниями собственного отца он был арестован и заточен в замок Иф. С этого времени жена оставила Мирабо, отказалась встречаться с ним и не отвечала на все просьбы супруга о примирении. Вскоре новый заключенный превратился в настоящую головную боль для тюремщиков, затем он соблазнил жену начальника замка. После такого скандала Мирабо перевели в крепость Жу, но заключение здесь разительно отличалось от предыдущего. Ограничение свободы в Жу было для него чисто формальным, так что Оноре имел прекрасную возможность поддерживать отношения с аристократическим обществом соседнего городка Понтарлье. Попытки примирения с отцом, предпринятые Мирабо, успехом не увенчались, маркиз упорно отказывался освободить его. Впервые в жизни будущий трибун ощутил, что он покинут всеми.
От ощущения одиночества его спасла встреча с женой старого маркиза де Моннье, Софией. Оноре, влюбленный как никогда ранее, убедил ее бежать с ним в Швейцарию. Оттуда пара переехала в Голландию, где Мирабо предложили работу переводчика с английского и немецкого. Кроме того, беглец подрабатывал написанием статей. Здесь же он создал еще один свой трактат, в котором выразил протест против государственной тирании. Но над головой влюбленных уже сгущались тучи. Оскорбленный в своих чувствах, де Моннье выдвинул обвинение против сбежавшей супруги. По решению суда ее объявили в розыск. К тому же отец самого Мирабо не желал успокаиваться и вновь натравил на него полицию. Вскоре влюбленные были схвачены, Софию заточили в монастырь, где ей предстояло оставаться до конца жизни. Что же касается Оноре, то его отправили в Венсеннскую тюрьму. Ослепленный жаждой мщения, де Моннье подал на него жалобу в парламент, и на очередном заседании Мирабо был приговорен к смертной казни, хотя такая мера наказания в отношении его была незаконна: София сама, добровольно последовала за любимым за границу, так что ни о каком похищении речь не шла.
Исполнение приговора все время откладывалось, и таким образом в тюрьме Оноре просидел три года. Поначалу заключенному не позволяли писать, но вскоре предоставили ему бумагу и чернила, оговорив при этом, что все написанное будет обязательно просматриваться полицией. В эти годы из-под пера Мирабо вышли письма к Софии, несколько романов, политических трудов и очерков. Свободу необузданный аристократ получил только накануне своего тридцатилетия. Он все же сумел добиться отмены смертного приговора и даже возложить на де Моннье, по чьей милости и был осужден, все судебные издержки.
Вскоре, в 1783 году, Оноре пришлось отстаивать свои права на еще одном судебном процессе, затеянном женой, который завершился не в его пользу. Тогда же Мирабо принял участие в тяжбе между собственными родителями. Дело разбиралось в парижском парламенте, где бунтарь столь яростно ополчился на существующий строй, что вскоре после выступления вынужден был покинуть Францию. Оноре вернулся в Голландию, где познакомился с госпожой де Нера, оказавшей ему внимание и поддержку в трудные минуты жизни. Мирабо очень привязался к этой сильной и уравновешенной женщине, разделявшей его убеждения. Несколько позже он усыновил ее ребенка от первого брака.
В 1784 году этот ярый сторонник государственных преобразований переехал в Лондон, где был принят в лучшее политическое и литературное общество. В Париж он возвратился спустя еще год, а уже в 1786 году его с тайным поручением послали в Пруссию. Мирабо должен был составить отчет о впечатлении, произведенном смертью Фридриха Великого, составить мнение о его преемнике и подготовить почву для займа. Поручение это было выполнено блестяще, министр Калонн получил от посланника 66 писем, которые содержали интересные наблюдения, остроумные выводы, сатирические очерки. Королю Вильгельму II Оноре также отправил письмо с советами относительно необходимых государственных реформ. По возвращении во Францию неутомимый борец за идеи издал брошюру, в которой горячо нападал на Калонна и Неккера. Видимо, именно из-за этого Мирабо не выбрали в собрание нотаблей и вынудили уехать в Тонгр. Там он выпустил еще несколько брошюр, ставших впоследствии основой для знаменитой Декларации прав.