Užbaigi šį sakinį: Be to, jis vis dar patyrė keletą tragedijų. 1942 m. mirė jo žmona Elisabet, o 1943 m. jo dukra Raya, gimusi žydų motinai, buvo deportuota į Gaggenau internatoriaus stovyklą. Debora Logak, savo vaikų motina, gyvenanti Montrouge, netoli Paryžiaus, buvo suimta 1942 m. liepos mėn.
Vélodrome d'Hiver. Ji buvo sulaikyta Drancy internatoriaus stovykloje ir, kaip manoma, buvo nužudyta Auschwitzo internatoriaus stovykloje. Išgirdęs, kad Trečiasis Reichas remia menininkus, Fiebigas išsiuntė pensijos prašymą Goebbelsui, kuris negalėjo mažiau rūpintis tapytojo darbais. Nors gimė vokiečiu, nacių administracija jo nepriėmė, ypač kai jis buvo kurlų gyventojas. Jis buvo beveik priverstas parodyti savo darbus Vokietijos okupacijos metu mainais į neaiškus pažadus pensijai, kurios niekada neįvykdytųsi. Jo dukra Raya po trumpo nacių arešto buvo stebuklingai išgelbėta. Nepaisant daugelio prašymų, jam niekada nebuvo suteikta Prancūzijos pilietybė. Dėl sunkaus gyvenimo per abu pasaulinius karus ir asmeninių dramų jis nuo 1946 m. beveik aklas ir nebegalėjo piešti ar dirbti. Po karo 1948 m. jis buvo išsiųstas į Schweisguth kazarmą Sélestat, kurį socialinė gerovė įsteigė neturtingems. Fiebigas visą gyvenimą nostalgiškai laukė Kurlandijos kraštovaizdžio. 1953 m. vasario 6 d. jis mirė Sélestat mieste, palikęs po savęs Raya ir reikšmingą, bet nepripažintą meno kūrinį. Jo giminaičiai pranešė, kad jis buvo palaidotas protestantų kapinėse, tačiau Sélestat mieste, kurio gatvė pavadinta jo vardu, jo kapų įrašų nėra.