Însă, la 26 de ani după mutare, biserica Sf. Ignaţiu va fi complet distrusă. Deşi şcoala a supravieţuit cutremurului din 1906
Cu doar pagube moderate, incendiile ulterioare au distrus școala și biserica, forțând SI să găsească o nouă locație lângă Golden Gate Park, o clădire din lemn "temporară" construită în grabă, cunoscută cu afecțiune ca "Fabrica de cămăși", care a găzduit școala timp de mai mult de 20 de ani, din 1906 până în 1929.