Tatăl lui, Charles Altamont Doyle, s-a născut la 22 mai 1859 la 11 Picardy Place, Edinburgh, Scoția. Tatăl său, Charles Altamont Doyle, s-a născut în Anglia, de origine irlandeză catolică, iar mama sa, Mary (născută Foley), a fost irlandeză catolică. Părinții săi s-au căsătorit în 1855. În 1864, familia s-a dispersat din cauza alcoolismului în creștere al lui Charles, iar copiii au fost adăpostiți temporar în Edinburgh. În 1867, familia s-a reunit din nou și a trăit în apartamente mizerabile la 3 Sciennes Place. Tatăl lui Doyle a murit în 1893, în Crichton, Dumfries, după mulți ani de boală psihiatrică.
Foley