În 1737 De La Warr a fost numit guvernator al New York-ului şi New Jersey-ului. Cu toate acestea, el nu a călătorit niciodată în America. El și-a continuat cariera militară în timp ce era activ în Camera Lorzilor și a luptat în Bătălia de la Dettingen
în 1743 în timpul războiului de succesiune austriacă. La 30 august 1737, a fost numit colonel al Trupelor de Cavalerie, funcție pe care a deținut-o până la moartea sa. A devenit general de brigadă în 1743, general-maior în 1745, general-locotenent în 1747 și general de cavalerie în 1765. În 1752 a fost numit guvernator al Guernsey, post pe care l-a deținut până la moartea sa. În 1761, George al III-lea l-a numit viconte Cantalupe și conte De La Warr.