Gardner ożenił się tylko raz. Jego żona, Donna, pozostała lojalnym kompanem przez ponad 33 lata, podczas których nie brała udziału w działalności męża. Gardner był zdruzgotany jej śmiercią i ponownie zaczął cierpieć na astmę. W 1964 roku Gardner zmarł na serce, na pokładzie statku powracającego z Libanu. Został pochowany na brzegu Tunezji.
Wicca thumb|left|200px|Latimers w Highcliffe, gdzie Gardner został inicjowany. Gardner twierdził, że został inicjowany w 1939 w tradycji religijnego czarostwa, które, jak uważał, było kontynuacją europejskiego pogaństwa. Grupa, do której dołączył, nosiła nazwę kowenu New Forest. Doreen Valiente, jedna z kapłanek, zidentyfikowała później kobietę, która inicjowała Gardnera, jako Dorothy Clutterbuck, na podstawie słów samego Gardnera, który wspominał o niejakiej „Starej Dorothy”Farrar, Janet & Steward (2002). A Witches’ Bible. Robert Hale. ..
Uczony Ronald Hutton twierdzi, że tradycja, w której inicjowany był Gardner, była inspirowana przez członków Stowarzyszenia Orderu Rosicrucian Crotona, a głównie przez kobietę o imieniu „Dafo”. Jej tożsamość jest nieznana, ale Philip Heselton twierdzi, że była nią Edith Woodward-GrimesHeselton, Wiccan Roots s. 262ff..