1584 m. jis vedė Sibilą Krelin, su kuria susilaukė šešių sūnų ir vienos dukters. Jų sūnūs Aleksandras (1587-1661), Vincentas (1595-1675) ir Niklas (1598-1658) tapė tapytojais, tapytojais mūšiuose ir tapytojais portretuose. Prieš
Antverpeno žlugimas, Emanuelis tikriausiai buvo kalvinistas, nes po Antverpeno žlugimo jo pirmasis sūnus buvo pakrikštytas kataliku. Po Antverpeno žlugimo jis buvo užregistruotas kaip katalikas Antverpeno civilinės gvardijos "išvalymo įrašuose". Jo turtas ir geri ryšiai su Antverpeno visuomenės aukščiausiais sluoksniais galėjo jį apsaugoti. Vėliau Emanuelis buvo paskirtas miesto sargybos kapitonu, o tai buvo nuolatinis užimtumas. 1595 m. jis dalyvavo kaimyninio Lier miesto, užimto Olandijos Respublikos kariuomenės, išlaisvinime.