Эта враждебная позиция приводила молодого супруга в отчаяние: «Софи, ужели это ты начертала такие обидные слова?..» Он заговорил даже о самоубийстве; конечно, то была литература: «Я уже собрался… но остановился… не из страха…» Он не позволил жене уехать и написал ей из Аугсбурга, что скоро приедет в Нанси навестить ее: «Я уже представляю себе, как я держу на одном колене тебя, а на другом – Абеля и как мне сладостно будет целовать тебя, когда ты уже носишь под сердцем новую надежду нашу…» Эти картины семейного и весьма плотского счастья нисколько не пленяли Софи. Напрасно майор живописал то счастливое мгновение, когда он окажется возле нее и сожмет ее в своих объятиях. Как раз этого она и боялась. Однако после рождения ребенка (16 сентября 1800 года она в Нанси произвела на свет второго сына – Эжена) она вынуждена была переехать к мужу в Люневиль, куда он был назначен губернатором. В Люневиле она вновь встретила Лагори, который был в большой милости при дворе и получил от Жозефа Бонапарта поручение вести переговоры о мире. Лагори показал себя при этом тонким дипломатом. Своим изяществом и отточенной речью он резко выделялся среди окружавших его вульгарных людей. «У него манеры роялиста», – говорил Сегюр. Что касается губернатора Гюго, он заказывал себе красивые мундиры и весьма гордился успехом своей жены, умную головку которой хвалил сам Жозеф Бонапарт. Своему старому товарищу Мюскару, назначенному губернатором Остенде, Гюго написал восторженное письмо о «своей прелестной Софи» и «достойном всяческого уважения Лагори». Классическая ситуация.
В штабе Рейнской армии Гюго стал одним из приближенных генерала Моро. Злополучная близость, ибо в 1800 году Моро разыгрывал роль соперника Бонапарта, и все преданные ему люди возбуждали подозрение у нового властителя. Несмотря на горячие рекомендации Жозефа Бонапарта, Гюго не получил в Люневиле повышения в чине. Друзья, заботившиеся о его будущем, добились, чтобы его назначили командиром батальона 20-й полубригады. «Это назначение, – сказал он, – является для меня источником новых горестей и отвращения…» Ведь командиром 20-й полубригады состоял офицер, с которым Гюго был в ссоре.
В 1801 году, во время путешествия из Люневиля в Безансон, благодаря прогулке в горы был зачат третий ребенок супругов Гюго (как сказал ему однажды отец) – на горе Донон, самой высокой вершине Вогезов, среди облаков, что доказывает, насколько властным и внезапным оставался любовный пламень майора. Этот третий сын родился в Безансоне 26 февраля 1802 года в старинном доме XVII века. Родители пригласили в крестные отцы генерала Виктора Лагори, а в крестные матери – Мари Десирье, супругу Жака Делеле, бригадного генерала, коменданта крепости Безансон, – поэтому и ребенка назвали Виктор Мари. Фактически крещения как такового не было