Boulton naceu en 1912 en Braxted Park, Essex, fillo do político Sir William Boulton, 1o Baronet, e asistiu ao Eton College antes de ingresar no Trinity College, Cambridge. O seu expediente académico non foi distinguido, pero foi capaz de entrar no Inner Temple en 1936 como avogado practicante. Ao estallar a Segunda Guerra Mundial, Boulton, que xa estaba coa Essex Yeomanry, uniuse á Royal Horse Artillery e serviu no norte de África. En 1940 participou na Operación Compass, loitando na Batalla de Bardia
e despois o asedio de Tobruk, onde contraeu ictericia e foi evacuado a Alexandría. Volveu ao servizo da liña de fronte pouco despois, pero foi ferido gravemente nunha explosión de mina terrestre.