A bátyja, John Q. Marr (1825-1861) a Virginia Military Institute-ben tanított, mint matematika és taktika asszisztens professzora, de 1848-ban hazatért, hogy gondoskodjon édesanyjáról és nővéreiről, Sarah/Sally-ről (1819-1895), Margaretről (1830-1903), Francesről és Jane-ről (1840-1927). Testvérei, Thomas Scott Marr (1830-1897) és James Ripon Marr (1832-1879) 1850-ben elhagyta az otthont. A testvére, Robert Athelstan Marr (1823-1854) az Egyesült Államok Haditengerészetének hadnagya volt; részt vett a mexikói-amerikai háborúban; lőtt az első lövést a Vera Cruz elleni tengeri támadásban.
És az USS "Albany" teljes legénységével a Karib-tengerben tűnt el 1854 októberében.