Sloane fæddist 19. maí 1850 í Middleville í New York, sonur James K. Sloane og Louisa Reno. Í bandarísku borgarastyrjöldinni, skráðist James í 76. sjálfboðaliða-fjallagönguhópinn í New York, var særður í Gettysburg og Antietam, var kallaður út og aftur skráður tvisvar sinnum, og var drepinn í
Barátta við Fort Fisher.