Wkrótce po ślubie Somerset udał się do kolonii Cape, gdzie jego ojciec był gubernatorem, i służył w Cape Mounted Rifles podczas wojen Xhosa
- Co? 25 marca 1823 r. został mianowany majorem, a 17 lipca 1824 r. podpułkownikiem. W 1834 r. został Kawalerem Królewskiego Zakonu Guelficznego, a później Towarzyszem Łaźni.