Lord Iveagh (usein tunnettu nimellä Benjamin Iveagh) syntyi anglo-irlantilaiseen Guinness-perheeseen, Arthur Onslow Edward Guinnessin, Elvedenin viskonnin ja Lady Elizabeth Cecilia Hareen, Richard Hare, Listowelin 4. jarlin tyttären, poikana. Hänen isänsä, viikontti Elveden, oli majuri 55. (Suffolk ja Norfolk Yeomanry) panssarivaunujen vastaisessa rykmentissä kuninkaallisessa tykistössä ja kuoli taistelussa V-2-raketin iskuun palvellessaan Belgiassa.
8. helmikuuta 1945. Vuonna 1947 hänen äitinsä meni uudelleen naimisiin Edward Rory More O'Ferrallin kanssa.