Pratt Parsing: Implementación y Registro de Funciones en Python
Clase 21 de 58 • Curso de Creación de Lenguajes de Programación: Intérpretes
Contenido del curso
Construcción del lexer o tokenizador
- 3

Análisis Léxico: Construcción de un Léxer para Intérpretes
05:36 min - 4

Definición de Tokens en Lenguaje de Programación Platzi
11:53 min - 5

Desarrollo de un Lexer con Test-Driven Development
15:43 min - 6

Pruebas de Operadores, Delimitadores y Fin de Archivo en Lexer Python
10:01 min - 7

Lexer: Identificación de Keywords y Tokens Complejos
18:57 min - 8

Reconocimiento de Funciones en Lexer de Lenguaje de Programación
07:46 min - 9

Implementación de Operadores y Condicionales en Lexer de Platzi
12:38 min - 10

Implementación de Operadores de Dos Caracteres en Lexer
12:08 min - 11

Creación de un REPL en Python para Lenguaje de Programación
12:35 min
Construcción del parser o analizador sintáctico
- 12

Construcción de un Parser para el Lenguaje Platzi
05:22 min - 13

Definición de Nodos Abstractos para Árbol de Sintaxis (AST) en Python
09:14 min - 14

Desarrollo de un AST en Python: Creación de la Clase Programa
12:49 min - 15

Parseo de Let Statements en Lenguaje Platzi
20:21 min - 16

Implementación de funciones advanced y expected tokens
08:26 min - 17

Manejo de Errores en Parsers con Test Driven Development
11:06 min - 18

Parseo de Return Statements en Lenguaje Platzi
12:42 min - 19
Técnicas de Parsing: Top-Down y Bottom-Up
01:46 min - 20

Pruebas de AST para Let y Return Statements en Parsers
12:06 min - 21

Pratt Parsing: Implementación y Registro de Funciones en Python
Viendo ahora - 22

Parseo de Identificadores en Lenguajes de Programación
13:29 min - 23

Parseo de Expression Statements en Platzi Parser
16:34 min - 24

Parseo de Enteros en Lenguaje Platzi
14:03 min - 25

Implementación de Operadores Prefijo en Parsers
16:43 min - 26

Operadores InFix en Expresiones: Implementación y Pruebas
10:40 min - 27

Implementación de Operadores InFix en un Parser
20:20 min - 28

Expresiones Booleanas en el Lenguaje de Programación Platzi
13:00 min - 29

Evaluación de Precedencia y Testeo de Booleanos en Parsers
08:39 min - 30

Evaluación de Expresiones Agrupadas en un Parser
10:16 min - 31

Parseo de Condicionales en Lenguaje Platzi
13:50 min - 32

Implementación de Condicionales en Parser de Lenguaje
12:05 min - 33

Parsing de Funciones en Lenguaje Platzi: Creación de Nodos AST
15:51 min - 34

Construcción de nodos de función en un parser AST
15:43 min - 35

Llamadas a Funciones en Lenguajes de Programación
13:05 min - 36

Implementación de llamadas a funciones en un parser con AST
12:21 min - 37

Parseo de Expresiones en LET y RETURN Statements
07:58 min - 38

Implementación de REPL para Árbol de Sintaxis Abstracta
08:59 min
Evaluación o análisis semántico
- 39

Evaluación Semántica en Lenguajes de Programación
03:42 min - 40

Estrategias de Evaluación en Lenguajes de Programación
09:18 min - 41

Representación de Nodos AST y Objetos en Python
14:17 min - 42

Evaluación de Expresiones en JavaScript y Python
19:39 min - 43

Implementación del Patrón Singleton para Booleanos y Nulos
11:52 min - 44

Evaluación de Prefijos en Lenguaje de Programación Platzi
14:41 min - 45

Evaluación de Expresiones Infix en Lenguaje Platzi
18:07 min - 46

Evaluación de Condicionales en Lenguaje de Programación Platzi
13:50 min - 47

Evaluación y Uso del Return Statement en Programación
14:42 min - 48

Manejo de Errores Semánticos en Lenguaje Platzi
21:05 min - 49

Declaración y Gestión de Variables en Lenguajes de Programación
13:55 min - 50

Manejo de Ambientes y Variables en Lenguajes de Programación
11:57 min - 51

Declaración de Funciones en Lenguaje de Programación Platzi
12:26 min - 52

Implementación de Llamadas a Funciones en PlatziLang
23:55 min
Mejora del intérprete
Siguientes pasos
¿Qué es el parsing Pratt y cómo se aplica?
El parsing Pratt es una técnica popular de parsing descendente, desarrollada por el creador Pratt Baum. A través de él, vamos construyendo iterativamente el árbol abstracto de sintaxis (AST) desde el comienzo del programa. Esta técnica se ha vuelto muy conocida, especialmente gracias a su uso en parsers importantes como el de JSON.
El parsing Pratt se vincula estrechamente con el lenguaje de programación JavaScript. Cuando trabajamos con un parseador JSON en JavaScript o Python, lo que hacemos es convertir un string en una estructura de datos, por ejemplo, un objeto con propiedades.
¿Cómo se asignan funciones a los tokens?
Una de las características más prominentes del parsing Pratt es que asigna funciones específicas a cada token. Estas funciones pueden ser de dos tipos: infix (infijo) o prefix (prefijo). Por ejemplo:
- Prefix: El operador "not" o el prefijo "-" signifique negación.
- Infix: El operador "-" representa una resta entre dos números.
La posición del operador es fundamental. Por ejemplo, un llamado a función donde el paréntesis de apertura actúa como operador infix en una expresión.
¿Cómo se implementan tipos con alias en Python?
Para hacer nuestro código más legible, usamos alias para identificar si tratamos con una función de prefijo o infijo. En Python, podemos crear alias de tipo utilizando el módulo typing. Aquí unos ejemplos:
from typing import Callable, Optional, Dict
# Alias para funciones de prefijo
PrefixParseFunction = Callable[[], Optional['Expression']]
# Alias para funciones de infijo
InfixParseFunction = Callable[['Expression'], Optional['Expression']]
# Diccionario para funciones de prefijo
PrefixParseFunctions = Dict['TokenType', PrefixParseFunction]
# Diccionario para funciones de infijo
InfixParseFunctions = Dict['TokenType', InfixParseFunction]
¿Cómo registramos funciones de parsing?
Al inicializar el parser, es fundamental registrar las funciones que se ejecutarán para cada tipo de token. Implementamos listas que permitirán llenar estos diccionarios con las funciones de parsing correspondientes.
class Parser:
def __init__(self):
self.prefix_parse_functions = self.register_prefix_functions()
self.infix_parse_functions = self.register_infix_functions()
def register_prefix_functions(self) -> PrefixParseFunctions:
return {}
def register_infix_functions(self) -> InfixParseFunctions:
return {}
Esto forma la infraestructura básica para parsers, permitiéndonos más adelante establecer conexiones entre token types y funciones específicas.
¿Qué consideraciones se tienen al usar parsing Pratt?
Dentro del parsing Pratt, es crucial tener presente el siguiente token usando peek_token. Este aspecto es vital para verificar si el orden sintáctico de los tokens es correcto. El proceso iterativo de parsing es un viaje de ajustes y mejora. Las dudas iniciales que se presenten serán esclarecidas a medida que se avanza en el aprendizaje y desarrollo del parser.
Aunque la complejidad del tema puede parecer intimidante, el parsing Pratt ofrece las herramientas necesarias para hacer un análisis sintáctico eficiente. Es emocionante explorar más sobre estas técnicas y cómo se pueden aplicar en la vida profesional. Únete a esta exploración compartiendo tus experiencias y los tipos de parsing que has encontrado en tu trayectoria. ¡El aprendizaje no se detiene!