Fattori gimė San Michele Extra, Veronoje. Po to, kai buvo "Audace San Michele" žaidėjas, iš kurio vėliau gimė Mariolino Corso, Fattori persikėlė į "Vicenza", kur debiutavo Serie A kaip klubo gynybinis vidurinis žaidėjas. 1946 m. jis persikėlė į "Sampdoria", kuri įsigijo jį (kartu su Bassetto) už rekordinę 10 milijonų lirų kainą po išsamių derybų su "Inter". 1947 m. vasarą jis prisijungė prie "Inter" po 12 mėnesių "Sampdorijoje". Su "Inter" Fattori pasiliktų septynis sezonus, laimėdamas du čempionatus 1953 metais.
ir 1954 m.