Eftir fall Vicksburg var deild Osterhaus flutt til Tennessee. Í átökunum í Chattanooga hjálpađi hann Joseph Hooker hershöfđingja ađ ná
Útlitsfjallið. Osterhaus tók síðan þátt í herferðinni í Atlanta en mánaðarlangur veikindaleyfi gerði það að verkum að hann missti af mikilvægu slaginu við Atlanta. Hann kom þó aftur í forystu og lék verulegt hlutverk í bardaga við Jonesborough. Eftir að Atlanta var tekið fékk hann stjórn á XV liði, einum af fjórum liðum sem herinn var sameinaður í, í Sherman's March to the Sea. Í mars 1865 var Osterhaus ráðinn aðalstjóri herdeildar Vestur-Mississippí undir stjórn Edward Canby hershöfðingja, sem hafði litla reynslu af bardaga. Osterhaus þjónaði Canby í átökunum við Spanish Fort og Fort Blakely. Þegar Edmund Kirby Smith gaf sig upp fyrir herjum bandalagsins í Trans-Mississippi leikskólanum var Osterhaus sendur sem fulltrúi Canby og skrifaði því persónulega undir skjölin fyrir hönd hers Bandalagsins.