Handler se narodil v San Franciscu, Kalifornie, jako syn Sandry Handlerové (rodeně Walpole), bývalé děkanky City College v San Franciscu, a Louise Handlera, účetního. Jeho otec byl židovský uprchlík z Německa a je vzdáleně příbuzný s britským spisovatelem Hughem Walpolem prostřednictvím své matky. Má mladší sestru Rebeccu Handlerovou. Handler byl od dětství nenasytný čtenář a jeho oblíbeným autorem byl William Keepers Maxwell, Jr. Navštěvoval základní školu Commodore Sloat, střední školu Herbert Hoover a střední školu Lowell. V roce 1992 absolvoval Wesleyanovu univerzitu.
účetní