ജയിംസ് മാഡിസൺ ജൂണിയർ അമേരിക്കയിലെ വിർജീനിയ സംസ്ഥാനത്തെ പോർട്ട് കോൺവേയുടെ അടുത്തുള്ള ബെല്ലെ ഗ്രൂ പ്ലാന്റേഷനിൽ 1751 മാർച്ച് 16 നാണു ജനിച്ചത്. പന്ത്രണ്ടു മക്കളിൽ ഏറ്റവും മൂത്തയാളായിരുന്നു അദ്ദേഹം. 
ജയിംസ് മാഡിസൺ സീനിയർ ആയിരുന്നു അദ്ദേഹത്തിന്റെ പിതാവ്. അദ്ദേഹത്തിന്റെ മാതാവ് നെല്ലി കോൺ വേ മാഡിസൺ ആയിരുന്നു..

ബാല്യകാലവും വിദ്യാഭ്യാസവും
മതം
വിപ്ലവസമരസമയത്തെ സൈനികസേവനം
ആദ്യകാല രാഷ്ട്രീയജീവിതം