Masterson prarado savo motiną 1900 m. Galvestono uraganui
kad ji išgyveno. Mastersonas turėjo vieną brolį ir vieną seserį, Wilmerą D. Mastersoną ir Lewisą Fisherį. Mastersonas taip pat pasamdė savo sūnėnus, kad jie iškastų rūdą jos volframų kasykloje Nyderlanduose. Jos dukterėnenė Amanda Masterson ir dukterėnenė Wilmer Dallam Masterson IV lankė UT.