Iniţial cunoscută sub numele de Conacul Juel, casa a fost construită între 1683 şi 1686 pentru ofiţerul naval danez Niels Juel. A fost a doua clădire care a fost finalizată pe Kongens Nytorv, care a fost proiectată de Christian al V-lea al Danemarcei în anii care au urmat încoronării sale în 1670, inspirat de piețele regale din Paris. Victoria lui Niels Juel în bătălia din Golful Køge
i-a adus faimă şi bogăţie. Noul său conac a fost proiectat de Lambert van Haven ca o clădire în formă de L în stilul baroc olandez.