O lona tama, o Charles Altamont Doyle, na fanau i Egelani, o se tagata Irish Katoliko, ma lona tina, o Mary (née Foley), o se tagata Irish Katoliko. Na faaipoipo ona matua i le 1855. I le 1864 na faataapeapeina le aiga ona o le faatupulaia o le ava malosi a Charles, ma sa tumau le fanau i le isi itu o Edinburgh. I le 1867, na toe faatasia ai le aiga ma nonofo i fale mautotogi i le 3 Sciennes Place. Na maliu le tama o Doyle i le 1893, i le Crichton, Royal Dumfries, ina ua mavae le tele o tausaga o maʻi o le mafaufau.
O Crichton Royal, Dumfries,