10. Y el orden??
1. Nuevo Juega El Muy Bien Niño
2. Maestra Exigente De Español La Es
Articulo – Sustantivo – Adjetivo –Verbo -Adverbio
11. Token
• Par que consiste en un nombre de token y un valor de
atributo opcional.
• El nombre del token es un símbolo abstracto que
representa un tipo de unidad léxica
• Los nombres de token son los símbolos de entrada que
procesa el analizador sintactico.
12. • Descripción de la forma que los lexemas de unTOKEN
pueden tomar.
• En el caso de una palabra clave como un token, el patrón
es sólo la secuencia de caracteres que forman la palabra
clave.
• Para los identificadores y algunos otros tokens, el patrón
es una estructura más compleja que es formada por
muchas cadenas.
13. LEXEMA
Secuencia de caracteres en el programa de origen que
coincide con el patrón de un token y es identificado por el
analizador léxico como una instancia de ese token.
14. Ejemplos
TOKEN PATRON LEXEMA
IF CARACTERES I,F IF
ELSE CARACTERES E,L,S,E ELSE
COMPARACION < O > O <= O >= O = O != <=, !=
ID LETRA SEGUIDA DE
LETRASY DIGITOS
SUMA,TOTAL
NUMERO CONSTANTES
NUMERICAS
3.23 345,123.65
LITERAL CUALQUIER SECUENCIA
DE CARACTERES PERO
ENMARCADAS POR
COMILLAS
“Mexicali”
“dirección:”
“precio $45.67”
