Cowell avslørte for Radio 1 Breakfast-presentanten Nick Grimshaw at 88-åringen hans mor held fram med å styra. "Hun elskar å tala med meg", tilstod sjefen for X Factor. "Det verste ho kan seia til meg når eg har venene mine rundt er: 'Simon, slutt å vise deg fram' og det finst ikkje noko svar på det", la han til. "Det skjedde med meg ein gong då eg var 15 år gamal, og eg tok med ei jente til lunsj på søndag. "Og eg viste meg fram. Då sa mamma: 'Simon, slutt å vise deg fram' og eg kunne ikkje tru på eit svar". Simon Cowell spøkjer med at han stadig lever tilbake til den dagen, men no nyttar han uttrykket til sin eigen vinning. "Eg hata henne så mykje", sa han. "Og det blei fast i meg. Det er ein veldig god ting å seia til dei andre dommarane". Cowell er tilbake på X Factor-dommeringspanelen for første gong på fire år. Han er 54 år gamal og håpar at han vil koma tilbake saman med Cheryl, Louis Walsh og Mel B. Han vil hjelpa til med å gjera songkonkurransen den same som den ein gong var. I dei siste åra har X Factor falle bak i ein kamp om rangeringar mot hovudrivaren Strictly Come Dancing, med fleire folk som ser på BBC One ballroom-dansprogrammet. Du kan høyra intervjua til Nick Grimshaw med Simon Cowell på Radio 1 Breakfast-show på fredag kl. 6:30 BST. Fylg @BBCNewsbeat på Twitter og Radio1Newsbeat på YouTube.
Cheryl, Louis Walsh eller Mel B kan ikkje klare det, men det er ein person som kan plassere Simon Cowell i staden - Julie, moren hans.