El documento describe las partes de una oración y proporciona ejemplos de oraciones con sus sujetos y predicados. Explica los conceptos de tokens, léxicos y patrones y cómo estos se usan para identificar unidades léxicas en el análisis sintáctico.
Y el orden??
1.Nuevo Juega El Muy Bien Niño
2. Maestra Exigente De Español La Es
Articulo – Sustantivo – Adjetivo –Verbo -Adverbio
11.
Token
• Par queconsiste en un nombre de token y un valor de
atributo opcional.
• El nombre del token es un símbolo abstracto que
representa un tipo de unidad léxica
• Los nombres de token son los símbolos de entrada que
procesa el analizador sintactico.
12.
• Descripción dela forma que los lexemas de unTOKEN
pueden tomar.
• En el caso de una palabra clave como un token, el patrón
es sólo la secuencia de caracteres que forman la palabra
clave.
• Para los identificadores y algunos otros tokens, el patrón
es una estructura más compleja que es formada por
muchas cadenas.
13.
LEXEMA
Secuencia de caracteresen el programa de origen que
coincide con el patrón de un token y es identificado por el
analizador léxico como una instancia de ese token.
14.
Ejemplos
TOKEN PATRON LEXEMA
IFCARACTERES I,F IF
ELSE CARACTERES E,L,S,E ELSE
COMPARACION < O > O <= O >= O = O != <=, !=
ID LETRA SEGUIDA DE
LETRASY DIGITOS
SUMA,TOTAL
NUMERO CONSTANTES
NUMERICAS
3.23 345,123.65
LITERAL CUALQUIER SECUENCIA
DE CARACTERES PERO
ENMARCADAS POR
COMILLAS
“Mexicali”
“dirección:”
“precio $45.67”