Geboren als de vierde zoon van Walter Montagu Douglas Scott, 5e hertog van Buccleuch, studeerde Charles Montagu Douglas Scott aan het Radley College en trad in 1853 toe tot de Royal Navy. Hij diende in de Zwarte Zee in 1855 tijdens de Krimoorlog. Hij nam ook deel aan de Slag bij Fatshan Creek in 1857 tijdens de Tweede Opiumoorlog.
en diende bij de marinebrigade tijdens de Indiase muiterij van 1857.