Oppenheimer naceu na cidade de Nova York o 22 de abril de 1904, fillo de Julius Oppenheimer, un rico importador de tecidos xudeu que emigrou a Estados Unidos desde Alemaña en 1888, e de Ella Friedman, unha pintora. Julius chegou a América sen diñeiro, sen estudos de bacharelato, e sen coñecemento da lingua inglesa. Obtivo un emprego nunha empresa de tecidos e nunha década foi un executivo da compañía. Ella era de Baltimore. Os Oppenheimer eran xudeus ashkenazi non observadores. En 1912 a familia mudouse a un apartamento no 11o andar de 155 Riverside Drive, preto da rúa 88 oeste de Manhattan, unha área coñecida por mansóns e casas luxosas.
tres anos