Setelah kematian Dominga Atherton pada tahun 1890, rumah itu dijual kepada Edgar Mills, saudara Darius Ogden Mills dari Bank of California, dan pada tahun 1900 diberi nomor baru dari 1950 ke 1990 California St. Pada tahun 1908 itu dibeli oleh George Chauncey Boardman, seorang raja real estat dan presiden San Francisco Fire Insurance, yang rumahnya hancur dalam gempa dan kebakaran tahun 1906
Aku tahu. Janda dan anggota keluarga lainnya tinggal di sana sampai 1923, ketika itu dibeli oleh Charles J. Rousseau, seorang arsitek, yang membagi-bagi menjadi 13 apartemen. Janda nya Carrie tinggal di sana dengan lima puluh kucing sampai kematiannya pada tahun 1974. itu masih dibagi. Rumah ini dilaporkan dihantui oleh sebanyak empat hantu, termasuk Carrie Rousseau, dan ditampilkan dalam tur hantu. Cerita yang sering dikutip adalah bahwa hantu asli adalah George H. B. Atherton, yang meninggal di laut di Pasifik Selatan pada tahun 1887 dan yang tubuhnya dikirim kembali ke San Francisco dalam tong rum, tetapi tong itu dikirim ke dermaga, bukan ke rumah.