Julia Duckworth Stephen była równie dobrze ustosunkowana. Jako potomkini damy dworu Marii Antoniny pochodziła z rodziny słynącej z piękności, które pozostawiły swój ślad w społeczeństwie wiktoriańskim jako modelki dla artystów prerafaelickich i wczesnych fotografów. Uzupełnieniem tych wpływów była ogromna biblioteka na 22 Hyde Park Gate, z pomocą której Virginię zaznajamiano z filologią klasyczną i angielską literaturą. Jednakże według jej pamiętników, jej najbarwniejsze wspomnienia z dzieciństwa nie są związane z Londynem, lecz z St Ives w Kornwalii, gdzie jej rodzina spędzała każde lato, aż do 1895. Wspomnienia rodzinnych wakacji i wrażenie, jakie wywarł na niej krajobraz, a zwłaszcza Godrevy Lighthouse, były źródłem powieści, które pisała w późniejszych latach, szczególnie Do latarni morskiej.