Rubuta ci gaba ga wannan sakin layi - Goff ya halarci makarantar mata a Basingstoke har sai ya kasance takwas. Bayan haka, ya halarci Makarantar St Aubyns, Rottingdean, kuma ya fara a Kwalejin Eton a watan Satumbar 1939, a farkon Yaƙin Duniya na Biyu. Duk da yake a Eton, ya mai da hankali kan harsunan gargajiya da tarihi, ya fi son waɗannan ga batutuwan kimiyya. A can, Henry Ley, wani mai kunna kiɗa wanda ya yi wasa a bikin naɗa Sarki George VI
, ya karfafa ƙaunarsa ga piano kuma ya koya masa ya yi wasa. Ya bar Eton a watan Disamba na 1944, bayan da ya sami tayin jinkirta shiga New College, Oxford, don bayan ya gama aikin soja.