Życie prywatne W latach 1970–1972 była związana z Edwardem Albertem. W styczniu 1973 romansowała z producentem filmowym Robertem Evansem. W 1977 spotykała się też z Nickiem Nolte i Warrenem Beatty. W 1978 romansowała z Dustinem Hoffmanem.
Była trzykrotnie mężatką. 23 sierpnia 1978 zawarła związek małżeński z aktorem, reżyserem i producentem filmowym Andrew Stevensem, synem aktorki Stelli Stevens. Razem zagrali w telewizyjnym remake’u ABC Cylinder (Topper, 1979). 4 stycznia 1980 doszło do rozwodu. 1 maja 1982 wzięła ślub z młodszym o sześć lat przemysłowcem Davidem Greenwaldem, lecz w 20 grudnia 1984 rozwiedli się. 29 września 1991 wyszła za mąż za kaskadera Toma Harta, z którym się rozwiodła w 1993.
Andy Warhol w swoim dzienniku z lipca 1981 przy swoim Montauk wspominał o romansie Jackson z historykiem Yulem ‘Rockiem’ Brynnerem II, synem Yula Brynnera. Tygodniowa prasa doniosła na Brynnera i Jackson będących razem też we wrześniu 1981.
W 1987 i 1989 operowano i amputowano jej jedną pierś. We wrześniu 1995 z pomocą przyjaciółki aktorki Rosie O’Donnell zaadoptowała syna Charlesa Taylora.