W 1904 roku zmarł na tyfus syn Emily Sibley Watson z pierwszego małżeństwa, architekt James G. Averell. 21 marca 1912 roku postanowiła na jego cześć zmienić dotychczasową nazwę Rochester Art Club na Memorial Art Gallery i przekazać ją w darze Uniwersytetowi w Rochester. 18 maja tego samego roku pierwszym dyrektorem nowej placówki został George Herdle, dotychczasowy dyrektor Rochester Art Club.
Inauguracja Dla potrzeb Galerii wzniesiono budynek w stylu włoskiego renesansu, zaprojektowany przez firmę Foster, Gade and Graham z Nowego Jorku, będący zwieńczeniem wysiłków lokalnych artystów, kolekcjonerów i filantropów. 8 października 1913 roku prezes Uniwersytetu w Rochester dokonał uroczystej inauguracji nowego budynku Memorial Art Gallery.
Działalność Po śmierci George'a Herdle'a w 1922 roku na stanowisku dyrektora zastąpiła go przez kolejne 40 lat jego córka Gertrude Herdle Moore (1896–1993), która przedtem była jego asystentką do spraw edukacji. Po nominacji stała się najmłodszym członkiem Association of Art Museum Directors (Stowarzyszenia Dyrektorów Muzeów Sztuki) i jedną z zaledwie trzech kobiet na stanowisku dyrektora muzeum w Stanach Zjednoczonych. W 1932 jej asystentką została jej siostra Isabel C. Herdle (1905–2004). Pełniła tę funkcję również przez 40 lat.