Wraz z młodszym bratem Davidem, James wstąpił do armii Stanów Zjednoczonych w 1861 roku, dołączając do kompanii F 16th Wisconsin Volunteer Infantry Regiment, po wybuchu amerykańskiej wojny domowej. Brał udział w
W bitwie o Pittsburg Landing, został zwolniony w 1862.