Àwọn òbí rẹ ṣe ìgbéyàwó ni 1855. Ni 1864 ìdílé náà tú ká nítorí àmujù ọtí tí ń pọ̀ sí i ti Charles, àti àwọn ọmọ náà ni wọ́n gbé fún ìgbà díẹ̀ káàkiri Edinburgh. Ni 1867, ìdílé náà tún pa dà wá papọ̀, wọ́n sì ń gbé ní àwọn ilé gbígbé tí kò dára ní 3 Sciennes Place. Bàbá Doyle kú ní 1893, ní Crichton, Royal Dumfries, lẹ́yìn ọ̀pọ̀lọpọ̀ ọdún tí ó ti ní àìsàn ọpọlọ.
Crichton Royal, Dumfries,