Despois da morte de Dominga Atherton en 1890, a mansión foi vendida a Edgar Mills, irmán de Darius Ogden Mills do Banco de California, e en 1900 foi renumerada de 1950 a 1990 California St. En 1908 foi comprada por George Chauncey Boardman, un magnata inmobiliario e presidente de San Francisco Fire Insurance, cuxa casa fora destruída no terremoto e no incendio de 1906
- Non. A súa viúva e outros membros da familia viviron alí ata 1923, cando foi comprado por Charles J. Rousseau, un arquitecto, que o subdivideu en 13 apartamentos. A súa viúva Carrie viviu alí con cincuenta gatos ata a súa morte en 1974. A casa é, segundo se informa, perseguida por ata catro fantasmas, incluíndo a Carrie Rousseau, e aparece en tours de fantasmas. A historia comúnmente citada é que o fantasma orixinal é George H. B. Atherton, que morreu no mar no Pacífico Sur en 1887 e cuxo corpo foi enviado de volta a San Francisco nun barril de ron, pero o barril foi entregado aos muíños, non á casa.