Fritzas ir Greta Tugendhatas praleido vos aštuonerius metus viloje, kol 1938 m. pabėgo iš Čekoslovakijos su savo vaikais (įskaitant filosofą Ernstą Tugendhatą), netrukus prieš tai, kai šalis buvo išardyta po Miuncheno susitarimo. Jie persikėlė į Šveicariją ir tada į Venesuelą; po karo jie grįžo į Šveicariją, bet niekada daugiau negyveno viloje. 1939 m. Gestapo ją konfiskavo ir naudojo kaip butą ir biurą; jos interjeras buvo modifikuotas ir daug kas dingo.
Brno