Isulat ang pagpadayon niining parapoha - Sa 1813, si Ruffin naminyo kang Susan Hutchings Travis sa Williamsburg. Ang magtiayon mibalhin ngadto sa usa ka plantasyon nga Ruffin napanunod gikan sa iyang namesake apohan sa, sa Coggin Point, sa daplin sa James River sa Prince George County, nga mao ang nailhan nga ang pagbiya punto sa Benedict Arnold human siya sa pag-switch allegiances ug raided sa daplin sa James River (lakip na ang Richmond) sa 1781. Sila adunay napulo ug usa ka mga anak sa wala pa si Susan Ruffin namatay sa 1846, bisan tuod ang kadaghanan mamatay sa wala pa ang American Civil War natapos ug ang ilang amahan naghikog: Edmund Ruffin Jr. (1814-1875), Agnes Ruffin Beckwith (1816<unk>1865), Julian Calx Ruffin (1821<unk>1864, nga namatay sa Battle of Drewry's Bluff
), Elizabeth Ruffin Sayre (1821<unk>1860), Rebecca Ruffin Bland (1823<unk>1855), Jane Ruffin Dupuy (1829<unk>1855), Charles Lorraine Ruffin (1832<unk>1870; VMI gradwado nga naluwas sa gubat), Ella Ruffin (1832<unk>1855), Ann Ruffin (1844<unk>1863) ug George Champion Ruffin (1845-1913).