A treia clădire a Colegiului Sf. Ignaţiu a suferit daune moderate în cutremurul din 1906 din San Francisco.
, dar a fost complet distrus în incendiul care a urmat. Campusul s-a mutat spre vest, la colțul străzilor Hayes și Shrader, aproape de Golden Gate Park. A ocupat o structură construită în grabă, cunoscută sub numele de Fabrica de cămăși (din cauza asemănării sale cu clădirile similare de fabricație ale epocii) pentru următorii 21 de ani. Colegiul s-a mutat în locul său actual de pe Fulton Street în 1927, pe locul unui fost cimitir masonic.