Í janúar 1933 tóku þjóðernissosialistarnir völdin og misstu ekki tíma í að breyta Þýskalandi í einflokksdiktátúr. Þar sem aðild að stjórnmálaflokki er nú ólögleg (að undanskildum aðild að Þjóðfélagsflokknum) sagði hún flokksfélaginu sínu upp. Olga Brandt-Knack var virkur meðlimur í SPD og var því talin "pólitískt óáreiðanleg". Starf hennar í Hamborgs-óperunni var sagt upp og hún neyddist til að hætta við dansskólann sem hún rak. Síðar var hún sett undir eftirlit öryggissviðsins og í að minnsta kosti einu tilviki handtekin í stuttan tíma. Hún gat ekki unnið sem atvinnumaður og tók nú vinnu sem ráðningarskrifa í skurðlækningum til ársins 1942. Milli 1942 og stríðsloksins
Árið 1945 fluttist hún úr borginni og bjó í rólegheitum hjá vinum sínum á landsbyggðinni.