El scanner parte la cadena en unidades con significado, descarta lo que no lleva información y etiqueta cada unidad con su clase. Aquí se cuenta cuántos tokens deja cada programa, de qué clase es cada lexema y hasta dónde llega el bocado más largo, que es la regla con la que el scanner decide dónde cortar.
Los tres bloques, resueltos
| En el programa | Qué deja | Clase |
| un espacio, un salto de línea, un comentario | nada | — |
let, in, add1, +, (, , | un token | literal de la gramática |
| un nombre escogido por quien programa | un token | identificador |
| dígitos, o un menos pegado a dígitos | un token | número |
Las palabras reservadas de un lenguaje no salen de una lista aparte: son los literales que la gramática escribió en sus producciones. Agregar una primitiva le quita al programador un nombre posible de variable, y eso ya se nota en el scanner.
Un ejercicio más
Agregue a la especificación léxica una regla para cadenas entre comillas dobles y, a la gramática, la primitiva largo, que recibe una cadena. Corra el scanner sobre largo("hola, mundo") y después sobre la misma línea sin la comilla de cierre. De cada corrida reporte cuántos tokens salieron, de qué clase es cada uno y qué hizo el scanner con lo que quedaba de la línea. Diga también cuáles nombres de variable dejaron de estar disponibles al entrar la primitiva.