Życie prywatne W 1806 r. poślubił Mary Brydone (zm. 21 lipca 1853), córkę Patricka Brydone'a i Mary Robertson, córki Williama Robertsona. Gilbert i Mary mieli razem pięciu synów i pięć córek: Charlotte Mary Elliot (zm. 3 czerwca 1899), żona Melville’a Portala, miała dzieci Harriet Anne Gertrude Elliot (zm. 9 lutego 1855) William Hugh Elliot-Murray-Kynynmound (19 marca 1814 – 17 marca 1891), 3. hrabia Minto Mary Elizabeth Elliot-Murray-Kynynmound (ok. 1815 – 10 kwietnia 1874), żona Ralpha Abercromby’ego, 2. barona Dunfermline, miała dzieci Henry George Elliot (30 czerwca 1817 – 30 marca 1907), kawaler Krzyża Wielkiego Orderu Łaźni, ożenił się z Anne Antrobus, miał dzieci Charles Gilbert John Brydone Elliot-Murray-Kynynmound (12 grudnia 1818 – 21 maja 1895), ożenił się z Louisą Blackett i lady Harriette Liddell, miał dzieci z obu małżeństw Frances Anna Maria Elliot-Murray-Kynynmound (ok. 1820 – 17 stycznia 1898), żona Johna Russella, 1. hrabiego Russell, miała dzieci George Francis Stewart Elliot-Murray-Kynynmound (9 października 1822 – 14 lutego 1901) Elizabeth Amelia Jane Elliot-Murray-Kynynmound (ok.