השלמת המשפט הבא: עלייתו לשליטה בממלכה החלה עם התבוסה האסון של אחיו הבכור ארצ'יבלד דאגלס, הרוזן הרביעי של דאגלס,
קרב גבעת הומילדון בספטמבר 1402, שם הוא נתפס על ידי האנגלים. ג'יימס היה כעת ראש סגל הראשי של משפחת דאגלס העוצמתית ונותר לו לשמור על השפעתם בדרום סקוטלנד. ההצלחות שלו בהקשר זה שמרו על השפעתו של דאגלס עד לשובו של אחיו הבכור משבי בשנת 1409, אז הוא קיבל את תפקידו של חבר המועצה וזכה בתגמול עם מתן נכסים נרחבים. החשוב ביותר היה מבצר אברקורן, אשר הפך למגוריו העיקריים עד סוף חייו.