Lim Goh Tong minangka anak kaping 5 saka 7. Bapake ya iku Lim Shi Quan (sawijining pedagang bibit ing Cina) lan Goh Ban. Dhèwèké duwé siji kang mas, 3 mbak, siji adi lanang, lan siji adi wadon. Bapake tinggal donya nalika Lim Goh Tong umur 16 taun mula dhèwèké kepeksamatu saka sekolah lan nggenteni bapake. Kanthi panjurung saka ibune, lan seduluré, dhèwèké wiwit nyambut gawé ana ing Malaysia lan nyambut gawé minangka tukang kayu, banjur dhèwèké dodolan piranti lan mesin lowak, nganti dhèwèké bisa etu bathi kanggo usaha pertambangan lan perkebunan cilik.