Dominga Athertonin kuoleman jälkeen vuonna 1890 kartano myytiin Edgar Millsiin, Darius Ogden Millsin veljelle Bank of California -pankista, ja vuonna 1900 sen numerointi muuttui 1950:stä 1990 California St:ään. Vuonna 1908 sen osti George Chauncey Boardman, kiinteistömagnaatti ja San Franciscon palovakuutuksen puheenjohtaja, jonka talo oli tuhoutunut vuoden 1906 maanjäristyksessä ja tulipalossa.
- Mitä? Hänen leskensä ja muut perheenjäsenet asuivat siellä vuoteen 1923, jolloin arkkitehti Charles J. Rousseau osti sen ja jakoi sen 13 asuntoon. Hänen leskensä Carrie asui siellä viidenkymmenen kissan kanssa kuolemaansa asti vuonna 1974. Se oli edelleen jaettu. Talossa kummittelee kuulemma jopa neljä aavetta, mukaan lukien Carrie Rousseau, ja se on esillä aaveiden kierroksilla. Yleisesti mainittu tarina on, että alkuperäinen aave on George H. B. Atherton, joka kuoli merellä Tyynenmeren eteläosassa vuonna 1887 ja jonka ruumis lähetettiin takaisin San Franciscoon rommi tynnyrissä, mutta tynnyri toimitettiin satamaan, ei taloon.