En xaneiro de 1933 os nacionalsocialistas tomaron o poder e non perderon tempo en transformar a Alemaña nunha ditadura unipartidista. Como a pertenza a un partido político era agora ilegal (excepto a pertenza ao Partido Nacional Socialista), ela terminou a súa pertenza ao partido. O historial de Olga Brandt-Knack como membro activo do SPD levou a que fose clasificada como "politicamente non fiable". A Ópera Estatal de Hamburgo rescindiu o seu emprego e ela foi obrigada a renunciar á escola de danza que estaba a dirixir. Posteriormente foi posta baixo vixilancia polos servizos de seguridade e, polo menos nunha ocasión, arrestada brevemente. Incapaz de traballar profesionalmente, ela agora, como a súa irmá, tomou un traballo como secretaria de citas de cirurxía ata 1942. Entre 1942 e o final da guerra
En 1945 marchou da cidade e viviu tranquilamente con amigos no campo.