dwukrotnie żonaty: 1. Evelyn Florence Margaret Winifred Gardner (1928 - 30; rozwód); 2. Laura Herbert (od 17.04.1037 do jego śmierci), 7 dzieci: Maria Teresa (ur. 1938), Auberon Waugh (ur. 1939), Mary (ur. 1940), Margaret Evelyn (ur. 1942), Harriet Mary (ur. 1944), James (ur. 1946), Michael Septimus (ur. 1950)