Schrijf een voortzetting voor deze paragraaf - Hargest werd overleefd door zijn vrouw en drie kinderen. Een vierde kind, Geoffrey Hargest, werd op 30 maart 1944 gedood, op 22-jarige leeftijd, tijdens de Slag bij Monte Cassino terwijl hij dienst deed bij het 23e bataljon. Hij is begraven op de oorlogsbegraafplaats van Cassino. Een andere zoon werd gedood tijdens de noodtoestand in Maleisië.
Ik weet het. James Hargest High School, een onderwijsinstelling in Invercargill, is naar hem vernoemd.