Qeybta hoose ka akhriso kadibna ka jawaab su'aasha afka ku qoran: Qeybta hoose: Calaamadaha waxaa badanaa lagu qeexaa ereyo caadi ah, kuwaas oo ay fahmayaan qalabka falanqeeyaha ereyada sida lex. Qalabka falanqeeyaha ereyada (oo si otomaatig ah loo soo saaro qalab sida lex, ama gacanta lagu sameeyo) wuxuu aqriyaa durdurka jilayaasha, wuxuu aqoonsadaa ereyada ku jira durdurka, wuxuuna u kala saaraa calaamadaha. Tan waxaa loo yaqaan 'tokenizing'. Haddii lexer uu helo calaamad aan ansax ahayn, wuxuu soo sheegi doonaa qalad. Su'aal: Maxaa la heli doonaa haddii uu soo sheego qalad?
calaamad aan ansax ahayn