Thomas Dudley syntyi Yardley Hastingsissä, kylässä lähellä Northamptonia, Englannissa, 12. lokakuuta 1576, Roger ja Susanna (Thorne) Dudleyn lapseksi. Perhe on pitkään väittänyt olevansa yhteydessä Sutton-Dudleyn ja Dudley Castleyn (Duke of Northumberland, Earls of Warwick and Leicester, Viscounts Lisle ja Barons Dudley); heidän vaakunaansa on samankaltaisia, mutta yhteyksiä todennäköisen yhteisen esi-isän lisäksi ei ole vielä todistettu. Roger Dudley, englantilaisen armeijan kapteeni, kuoli ilmeisesti taistelussa. Hänet luultiin kuolleen vuonna 1590 Ivryn taistelussa.
Susanna Dudleyn tiedetään olleen leski jo vuonna 1588. Vuoden 1586 Zutphenin taistelua on myös ehdotettu Roger Dudleyn kuoleman syyksi.