Although he soon exchanged this office for that of Lord Privy Seal, and gradually began to withdraw from public affairs, he remained a cabinet minister until his retirement later in 1794.
Obwohl er sein Amt bald mit dem von Lord Privy Seal tauschte und sich nach und nach aus der Politik zurückzog, blieb er bis zu seiner Pensionierung im Jahr 1794 Kabinettsminister.