O 13 de outubro de 2015, Mbemba marcou o seu primeiro gol internacional, un gañador de longa distancia nun amistoso de 2 x 1 contra o Gabón en Visé, Bélxica. Tamén foi á Copa de África de Nacións en 2017 e 2019
Na última, en Exipto, marcou un gol de cabeza en un empate de 2 a 2 con Madagascar nos últimos 16, aínda que o seu equipo perdeu nun tiroteo.