Charles Montagu Douglas Scott gimė kaip ketvirtasis Walter Montagu Douglas Scott, 5-ojo Buccleuch kunigaikščio, sūnus. Jis išsilavinė Radley koledže ir 1853 m. stojo į Karališkojo jūrų laivyno tarnybą. 1855 m. Krymo karo metu tarnavo Juodojoje jūroje. Jis taip pat dalyvavo 1857 m. Fatshan kreko mūšyje per Antrąjį opiumo karą.
1857 m. Indijos maišto metu tarnavo jūrų brigadoje.