Pisywał również poezje, niekiedy wzbogacał teksty swoich kazań czy przemówień wierszami własnego autorstwa.
Życie prywatne 28 lipca 1947 w świątyni w Logan poślubił Donnę Edith Smith. Para doczekała się 10 dzieci, 60 wnuków i 120 prawnuków. Jeden z jego synów, Allan F. Packer, posługiwał w Kościele jako wchodzący w skład władz naczelnych siedemdziesiąty (2008-2018). Donna opublikowała On footings from the past : the Packers in England, poświęconą genealogii rodziny. Książka ukazała się drukiem w 1988.
Znany z zamiłowania do natury, szczególnym sentymentem darzył ptaki. Amatorski artysta, parał się rzeźbą i malarstwem. Pozostawił po sobie rzeźby ptaków. Jego obrazy z kolei były inspirowane krajobrazami wiejskich regionów Utah. Niektóre z prac Packera zdobią świątynię w Brigham City, były też prezentowane w Museum of Church History and Art. Od 2014 tworzą stałą wystawę w Monte L. Bean Life Science Museum Uniwersytetu Brighama Younga.
Zmarł w otoczeniu rodziny, w swoim domu w Salt Lake City, został pochowany na cmentarzu w rodzinnym mieście.