Tha athair Downey leth Liotuanach Iùdhach, aon cheathramh Iùdhach Ungarach, agus aon cheathramh de shliochd Èireannach, fhad's a bha muinntir Alba, Gearmailteach, agus Eilbheis aig màthair Downey. B' e Elias an t-ainm teaghlaich tùsail aig Robert a chaidh atharrachadh le athair gus a dhol a-steach don Arm. Dh'fhàs Downey agus a phiuthar as sine Allyson ann an Greenwich Village. Mar phàiste, bha Downey "air a chuairteachadh le drogaichean".
Elsie Ann