Marié à :
- Martha Gellhorn (5 Novembre 1940 - 21 Décembre 1945) (divorcé)
- Mary Welsh (14 Mars 1946 - 2 Juillet 1961)
- Pauline Pfeiffer (10 Mai 1927 - 4 Novembre 1940) (divorcé) 2 fils
- Hadley Richardson (3 Septembre 1921 - 10 Mars 1927) (divorcé) 1 fils
Grand-père de Mariel Hemingway et Margaux Hemingway