Üle kahesaja aasta tegutsenud kirik kaotas oma koguduse 1944. aastal, mil siinsed rootslased asusid hirmust peatselt saabuva Punaarmee ees Rootsi. Märtsirünnakus olid hoonestiku katused sodiks pommitatud. Nõukogude võim muutis kiriku spordihooneks. Siin poksiti, maadeldi, tõsteti kangi ja  katuse all mängiti lauatennist.