כתוב המשך לפרק זה - וולסי נולד במחוז לילנו, מישיגן, ב-29 באוגוסט 1894, בנו של ביירון וולסי ושל שרה הול. סבו של וולסי, צ'אונסי וולסי, מת בשנת 1864 בקרב טוטופוטומוי קריק
במחוז האנובר, וירג'יניה, במהלך מלחמת האזרחים. סבא רבא שלו, אדולפוס וולסי, שירת במלחמת 1812. וולסי היה צאצא של ג'ורג' (ג'וריס) וולסי, מתיישב מהמאה ה-17 בניו אמסטרדם ומקור משפחת וולסי באמריקה.