Farnsworth was born in Green Oak, Michigan, nephew of John F. Farnsworth, a prominent politician in the Democratic Party who later became a Republican, also serving as a Civil War general.
Farnsworth blev født i Green Oak, Michigan, nevø af John F. Farnsworth, en prominent politiker i Det Demokratiske Parti som senere blev Republikaner, og også gjorde tjeneste som general i borgerkrigen.