Vương quốc Brunei bắt đầu suy sụp; và đến thế kỷ XIX thì Sultan của Brunei nhượng lại Sarawak cho James Brooke để báo ơn người này vì công giúp đỡ dập tắt một cuộc nổi dậy và phong cho Brooke làm rajah; và nhượng lại Sabah cho Công ty Đặc hứa Bắc Borneo của Anh Quốc. Năm 1888, Brunei trở thành một lãnh thổ bảo hộ của Anh Quốc và một Thống sứ Anh Quốc được bổ nhiệm trong vai trò người quản lý thuộc địa vào năm 1906. Sau khi bị Nhật Bản xâm chiếm trong Chiến tranh thế giới thứ hai, một hiến pháp mới được thảo ra vào năm 1959. Năm 1962, một cuộc nổi dậy vũ trang chống lại chế độ quân chủ bị dập tắt với sự giúp đỡ của người Anh.