Graf a München közelében, a Starnberg-tó környékén található festői tájban született. Max Graf pékségész és felesége, Therese (született Heimrath), egy farmer lánya kilencedik gyermeke volt. 1900-tól az Aufkirchen állami iskolába járt, a Berg településen. Apja 1906-ban meghalt, megtanulta a pékség szakmát, és az apjuk pékségét átvett Max testvérének dolgozott. Kérdés: Melyik gyermek volt Graf?
kilencedik gyermek