O lona tama, o Robert Downey Sr., o se tagata fai ata tifaga ma se tagata fai ata tifaga, ae o lona tina, o Elsie Ann (née Ford), o se tagata fai ata tifaga na aliali mai i ata tifaga a Downey Sr. O le tama o Downey o le afa Lithuanian Jewish, tasi le kuata Hungarian Jewish, ma le tasi kuata Irish descendant, ae o le tina o Downey na i ai Sikotilani, Siamani, ma Suiselani tupuaga. O le igoa muamua o le aiga o Robert o Elias lea na suia e lona tama e lesitala i le Army. Na ola aʻe Downey ma lona tuafafine matua o Allyson i Greenwich Village. A o laitiiti, Downey na "siosiomia e fualaau faasaina".
Elsie Ann