Bapaké, Robert Downey Sr., iku aktor lan sutradara, déné ibuné, Elsie Ann (née Ford), iku aktris kang tampil ing filem-filem Downey Sr. Bapaké Downey iku setengah Lithuanian Yahudi, seperempat Hungarian Yahudi, lan seperempat keturunan Irlandia, déné ibuné Downey duwé keturunan Skotlandia, Jerman, lan Swiss. Jeneng kulawarga asliné Robert yaiku Elias kang diowahi déning bapaké kanggo mlebu ing Angkatan Darat. Downey lan adhine Allyson tuwuh ing Greenwich Village. Minangka bocah, Downey "kaubengi obat-obatan".
Elsie Ann