Voltooi de volgende zin: Swanton, zijn vrouw en dochter vluchtten naar Maine tijdens de Burgeroorlog, en lieten het huis in de zorg van een weduwe, Mrs. Johnson. Op 19 juli 1864 werd het huis het hoofdkwartier van het Leger van de Tennessee, op weg om deel te nemen aan de
De Slag om Atlanta. De aanwezigheid van generaal Thomas W. Sweeny in Swanton House is geregistreerd in de archieven van die tijd. Later, toen generaal Sherman in september 1864 de bezetting van Atlanta beval, gebruikte het Army of the Ohio het Swanton House als hoofdkwartier. Het huis werd dus bespaard van vernietiging in de oorlog.