В местечке Понтарлье Мирабо познакомился с семейством Монье, которое играло там первую роль. Оно состояло из семидесятилетнего старика и двадцатичетырехлетней его жены, Софи Монье. Между хозяйкой дома и Мирабо завязался знаменитый в свое время роман. Монье смотрел на связь своей жены снисходительно. Мстительный старик хотел иметь сына, чтобы отстранить от наследства дочь свою Валдон, которую ненавидел. В это самое время за границей отпечатан был “Опыт о деспотизме”, и Мирабо делал тайные поездки в Швейцарию, чтобы обеспечить его ввоз и распространение во Франции. Благоприятное обстоятельство, заключавшееся в том, что Монье желал иметь сына, не помогло; страстность и необузданность Мирабо испортили все дело. Своим поведением любовники наделали столько шуму и произвели такой скандал, что дальнейшее пребывание в Понтарлье сделалось для графа невозможным. 14 января 1776 года он исчез и долго скрывался в городе, где Софи ежедневно встречалась с ним.
Скрываясь в разных местах, он опять сошелся со своей матерью, которая стала хлопотать об определении его на военную службу. Отец испугался: мать, бессильная сама по себе вследствие своей безграмотности, приобретала в сыне могущественное перо. Жестокий маркиз возбудил к себе почти общую ненависть в своем семействе, и единодушное противодействие жены и детей наделало ему много горя. Чтобы избавиться от беды, он, видимо, решился держать сына своего в вечном заключении.
Когда положение графа в Понтарлье сделалось невозможным, Софи Монье переехала к своей матери в Дижон, а Мирабо тайно последовал за нею. Мать Софи не захотела покровительствовать их отношениям и заявила начальству о пребывании Мирабо. Но в это время взгляд на произвольные аресты и их жертвы, в том числе и нашего молодого человека, существенно изменился. Бессердечная ненависть его отца, который был во многих отношениях хуже сына, возбудила всеобщее негодование. Что он сделал, какое совершил преступление? – спрашивали люди. Он наделал долгов и попал в руки к ростовщикам; но ведь это дело между ним и ростовщиками; он пьяный подрался с Вильнефом; но мало ли пьяных, которые дерутся между собою? против этого достаточны обыкновенные полицейские меры; его отношения к женщинам были грязны, но тут ему подавали пример не только его отец, а и весь развратный французский двор. Неужели он за это стоил вечного тюремного заключения? Поступать с ним так, как с ним поступали, значило или убить, или до крайности ожесточить