Ukonči nasledujúcu vetu: Bol synom Hans Christopha von Gagerna, štátneho ministra v Nassau; navštevoval gymnázia v Kreuznach, Mannheime a Weilburgu a od roku 1826 študoval právo v Heidelbergu, Utrechte a Göttingene. Po pobyte v Paríži získal v roku 1829 pozíciu v kabinete holandského kráľa Viléma I. Pri výskyte
Po belgickej revolúcii (1830) sa ako dobrovoľník pridal k holandskej armáde a zúčastnil sa vojny proti Belgicku. V roku 1833 odišiel do dôchodku zo služby Holandska, oženil sa s Franzinou Lambertovou z Haagu a začal študovať históriu, aby sa prispôsobil pozícii Privatdozent na univerzite v Bonne. V rokoch 1837 - 1840 bol v Bonne. V roku 1837, hoci bol stále protestantom, sa postavil na stranu uväzneného kolínskeho arcibiskupa Droste-Vischeringa, a tak stratil priazeň pruskej vlády. V roku 1840 ho vojvoda z Nassau vymenoval za ministerského nástupcu s titulom Legationsrat.