Completa la següent frase: Zumpe va néixer a Zwickau. Després de passar el Notabitur, Zumpe va ser reclutat al servei militar a l'edat de divuit anys. Després de servir tant a l'est com a la
Front Oest, va ser presoner de guerra fins al 1948. Després d'un període com a treballador d'emmagatzematge, va ser contractat com a bibliotecari a Wismut a Johanngeorgenstadt. Dotat només de les seves experiències com a nen al cor de la in Zwickau, va assumir com a director de cor en l'ensemble cultural de Wismut. Va ser aquí on Rudolf Fischer de la Leipzig Musikhochschule el va descobrir en un concurs de cor i el va portar a Leipzig per estudiar.