ولد أوبنهايمر في مدينة نيويورك في 22 أبريل 1904، لأبيه جوليوس أوبنهايمر، وهو يهودي ثري مستورد نسيج هاجر إلى الولايات المتحدة من ألمانيا في عام 1888، وأبيه فيليكس فريدمان، وهو رسام. جاء جوليوس إلى أمريكا بدون مال، بدون دراسات البكالوريا، وبدون معرفة باللغة الإنجليزية. حصل على وظيفة في شركة نسيج وخلال عقد كان مسؤولاً تنفيذياً في الشركة. كانت إيلا من بالتيمور. كان أفراد عائلة أوبنهايمر من اليهود الأشكنازيين غير الملتزمين. في عام 1912 انتقلت العائلة إلى شقة في الطابق 11 من 155 ريفيرسايد درايف، بالقرب من شارع 88 غرب مانهاتن، وهي منطقة معروفة بالقصور والقصور الفاخرة.
ثلاث سنين