Swoją matkę, Sophie z d. Trébuchet, Hugo przedstawiał jako Wandejkę, związaną z powstaniem rojalistycznym r. 1793, przekonaną monarchistkę z rodziny zamożnych armatorów z Nantes. Obraz ten był w rzeczywistości literacką kreacją: rozmiłowany w antytezach poeta stworzył w ten sposób wizerunek samego siebie jako syna dwóch przeciwieństw, rojalistki i rewolucjonisty. W rzeczywistości Sophie Trébuchet straciła rodziców w dzieciństwie i została wychowana przez ciotkę i dziadka, sympatyzujących z ideami oświeceniowymi. Rodzina Trébuchetów poparła rewolucję francuską. Po wybuchu powstania wandejskiego brat i wuj Sophie blisko współpracowali z komisarzem Konwentu Carrierem, a dziadek kobiety zasiadał w Trybunale Rewolucyjnym w Nantes. Matka pisarza stała się rojalistką dopiero po 1812, pod wpływem osobistych doświadczeń – śmierci kochanka rozstrzelanego na rozkaz Napoleona za udział w spisku.
Victor Hugo miał dwóch starszych braci: Abla Josepha (ur. 1798) oraz Eugène’a (ur. 1800).
Dzieciństwo thumb|Victor Hugo jako dziecko