Kai prasidėjo Amerikos pilietinis karas, Madisono universiteto studentai susirinko savanorių kompaniją ir pasiūlė ją tarnauti Jungtinėms Valstijoms. 1861 m. rugsėjį kompanija tapo C kompanija, 61-asis Niujorko savanorių pėstininkų pulkas, o Broady tapo jo kapitonu. Po metų Broady buvo paaukštintas į pulkininko leitenantą, o 1863 m. pavasarį jis tapo pulkininko leitenantu ir pulko vadu. 1864 m. vasarą Broady, dar būdamas pulkininko leitenantu, tapo Potomaco armijos brigados vadu. Po mėnesio jis buvo sužeistas per antrąjį Ream's Station mūšį.
, ir turėjo palikti savo komandą. Vėliau jis buvo išvežtas iš Jungtinių Valstijų, už Peterburgo, Virdžinijos, ribų. 1865 m. Broady tapo JAV savanorių pulkininku.