James Milne, vėliau žinomas kaip James Mill, gimė Northwater Bridge, Logie Pert parapijoje, Angus, Škotijoje, Jameso Milne, batininko ir smulkiojo ūkininko sūnumi. Jo motina, Isabel Fenton, iš šeimos, kuri patyrė su Stuarto sukilimu susijusių problemų, nusprendė, kad jis turėtų gauti pirmosios klasės išsilavinimą, ir išsiuntė jį pirmiausia į parapijos mokyklą, o tada į Montrose akademiją, kur jis liko iki neįprastų septyniolikos su puse metų amžiaus. Jis tada įstojo į Edinburgo universitetą, kur jis išsiskyrė kaip graikų mokslininkas. 1789 m. spalio mėn. Jis buvo įšventintas Škotijos bažnyčios ministru, bet sulaukė mažai sėkmės.
Malūnas