Smith gimė Sadie Smith Willesden, šiaurės vakarų Londono rajone Brent, Jamaikos motina, Yvonne Bailey, ir anglų tėvas, Harvey Smith. 14 metų amžiaus ji pakeitė savo vardą į Zadie.Smith motina užaugo Jamaikoje, ir emigravo į Angliją 1969 metais.Smith tėvai išsiskyrė, kai ji buvo paauglė. Ji turi pusiau sesuo, pusiau brolis, ir du jaunesni broliai (vienas yra reperis ir stand-up komikas Doc Brown, o kitas yra reperis Sky Lucz). Kaip vaikas, Smith mėgsta šokių šokių, o paauglystėje ji svarstė karjerą muzikos. Kol Smith universitete, uždirbo pinigus kaip džiazo dainininkė, ir norėjo tapti žurnaliste.
Yvonne Bailey