Implementación de Operadores y Condicionales en Lexer de Platzi

Clase 9 de 58Curso de Creación de Lenguajes de Programación: Intérpretes

Resumen

¿Cómo extender el léxico para condicionales y booleanos?

El desarrollo de un intérprete para el lenguaje de programación Platzi requiere que ampliemos nuestras capacidades continuamente. Hasta ahora, hemos hecho grandes avances en el manejo de variables, operadores básicos y funciones. Sin embargo, el enfoque ahora está en expandir nuestro léxer para incluir operadores adicionales y diálogo condicional.

¿Cómo se implementan los operadores adicionales?

Para empezar, debemos implementar una serie de pruebas y modificaciones en nuestro sistema. El enfoque aquí es crear un nuevo test llamado test control statement, con el fin de corroborar si nuestros condicionales generan las consecuencias correctas.

  1. Pruebas necesarias:

    • Debemos definir un source y tokenizar el siguiente string: si 5 menor que 10 regresa verdadero, si no regresa falso.
    • Esto requiere implementar keywords como , regresa, verdadero, falso, y también definir un operador de comparación como <.
  2. Cambio en el método next token:

    • Modificando el método next token en el léxer, podemos determinar dónde se ubican cada uno de los operadores y ajustar nuestras expresiones regulares.
  3. Actualización en lookup token type:

    • En el módulo token.py, dentro del método lookup token type, añadimos las nuevas keywords a reconocer, como: falso, verdadero, (equivalente a if), si no (equivalente a else), y regresa (como return).

¿Qué cambios se realizan en el archivo de tokens?

La manipulación del archivo token.py es crucial para determinar los tipos de token extendidos.

  1. Definición de nuevos token types:

    • Añadimos else, false, if, return y true en nuestro enum de token types, siguiendo un orden alfabético para facilitar futuras revisiones.
  2. Implementación del operador <:

    • Introducimos una expresión regular dentro de next token para reconocer el operador < y construimos un token correspondiente al tipo less than.

¿Cómo se crea un test para operadores de un solo carácter?

El último paso incluye ajustar el test one character operator para verificar si los nuevos operadores son reconocidos correctamente.

  1. Operadores a implementar:

    • Además de los ya existentes de asignación y suma, añadimos: resta, división, multiplicación, menor que, mayor que y negación.
  2. Modificación y prueba:

    • Ajustamos los tokens esperados en el test y modificamos el código dentro de next token para identificar estos caracteres.

Esta serie de implementaciones garantiza que nuestro intérprete no solo reconozca elementos básicos, sino que pueda procesar condiciones y operadores fundamentales. Prueba estas nuevas características y comparte tus hallazgos en los comentarios. ¡Mantén siempre el entusiasmo por el aprendizaje y el crecimiento en programación!