Опенхаймер е женен за биоложката Катрин "Кити" Пюнинг, от която има две деца - Питър и Катрин. По време на брака им той има връзка с бившата си приятелка Джийн Татлок, която умира през 1944 г.
Повечето хора свързват Лос Анджелис с представите за плажове, палми и холивудски звезди. Малцина обаче знаят, че той се намира в един от най-големите региони за добив на петрол в САЩ