He was the brother of Virginia Governor and U.S. Senator Harry F. Byrd, a dominant figure in the Virginia Democratic Party from the 1920s until the 1960s; their father served as Speaker of the Virginia House of Delegates for a time.
A fost frate cu guvernatorul Virginiei și senatorul SUA Harry F. Byrd, figură dominantă din Partidul Democrat din Virginia între anii 1920 și 1960; tatăl lor a fost o vreme speaker al Camerei Delegaților din Virginia.