Sus padres fueron William Henry Harman y Sally (Garber) Harman, quien nació en Waynesboro, Virginia, el 17 de febrero de 1828.
Lewis nació en Waynesboro, Virginia, el 17 de febrero de 1828. Sus padres fueron William Henry Harman y Sally (Garber) Harman.