Znaczenie Ogrodów Watykańskich pomniejszyło wybudowanie Pałacu Kwirynalskiego jako letniej rezydencji papieży, a w XVII wieku nabycie willi w Castel Gandolfo.
Papież Leon XIII wzniósł na szczycie Wzgórza Watykańskiego skromną willę, gdzie spędzał dużo czasu. Za Piusa X willę połączono podziemnym przejściem z Pałacem Apostolskim. Po podpisaniu Traktatu Laterańskiego w 1929 roku na terenie ogrodów zbudowano: Pałac Gubernatorski, Pałac Trybunału, Pałac św. Karola, stację kolejową, Kolegium Etiopskie oraz siedzibę Radia Watykańskiego.
Opis Ogrody Watykańskie zajmują prawie połowę obszaru Państwa Watykańskiego. Zajmują stok Wzgórza Watykańskiego. Z trzech stron otoczone są murami obronnymi z bastionami. Od strony wschodniej przylegają do absydy Bazyliki św. Piotra i długiego skrzydła Muzeów Watykańskich.
Plac Pierwszych Męczenników Wchodząc na teren ogrodów pod Łukiem Dzwonów (), na lewo od monumentalnych schodów do bazyliki, mija się Plac Pierwszych Męczenników (). Jest to teren dawnego Cyrku Nerona (). Marmurowa płyta znajduje się w miejscu, w którym do 1584 roku stał egipski obelisk, przeniesiony na środek Placu Świętego Piotra. Do placu przylega od południa Kolegium TeutońskiePierwsze w Rzymie hospicjum dla pielgrzymów z ziem Franków.