Descrivi i termini tokenizzazione, stemming e lemmatizzazione nel processo di elaborazione del linguaggio naturale.
La tokenizzazione è il processo di suddividere una frase nei suoi singoli termini e segni di punteggiatura. Lo stemming è il processo di rimozione dei suffissi e dei prefissi per determinare la forma radice di una parola. La lemmatizzazione è il processo di raggruppamento di parole correlate in base al loro significato, in modo che un singolo termine possa rappresentare diverse forme di una parola. Tutti questi processi vengono utilizzati nell'elaborazione del linguaggio naturale per ridurre il numero di parole ed elaborare efficacemente i dati del linguaggio naturale.