El rol de data engineer es la pieza que conecta las fuentes de información con quienes toman decisiones en una empresa. Si quieres entender qué hace un ingeniero de datos, cuándo se vuelve indispensable en un equipo de data science y qué habilidades necesitas para crecer en esta carrera, aquí tienes la perspectiva de Alexis Araujo, parte del equipo de data science de Platzi.

Cómo se descubre el camino hacia la ingeniería de datos

Muchas personas llegan a este rol sin saber que existía. Alexis lo descubrió en su primer trabajo, extrayendo datos de distintos sistemas y conectando información en Excel para que otros equipos pudieran analizarla [00:24].

Esa primera experiencia, conectarse a bases de datos y hacer transformaciones pequeñas o grandes, es la puerta de entrada típica al mundo del data engineering. El gusto por las bases de datos, las tecnologías y entender en qué casos de uso aplicarlas es lo que sostiene una carrera larga en esta área.

¿Qué hace un data engineer? Construye los puentes que llevan datos desde múltiples fuentes (APIs, bases de datos, redes sociales) hasta los equipos que los analizan, asegurando que la información esté disponible y lista para usarse.

Cuándo necesitas un ingeniero de datos en tu proyecto

La señal más clara aparece cuando defines qué métricas del negocio quieres medir. En el momento en que tienes claridad sobre qué información extraer y de dónde, ya necesitas a alguien que construya esos puentes [01:33].

Este rol se vuelve indispensable porque centraliza fuentes que viven en lugares distintos: una plataforma interna, social media, sistemas externos. Sin esa función, el equipo de análisis se queda sin materia prima.

Qué actividades ocupan el día a día

Las tareas más comunes giran alrededor de la conexión con fuentes de datos. Estas son las actividades centrales:

• Identificar a qué fuentes conectarse: APIs, bases de datos relacionales y no relacionales.
• Gestionar permisos y credenciales como las API keys.
• Conocer la documentación y los modelos de datos de cada aplicación.
• Elegir el lenguaje de programación adecuado para cada conexión.
• Extraer la información de forma confiable y reproducible.

Si no conoces las fuentes, los modelos ni la documentación de las APIs, no vas a saber cómo conectarte [02:30]. Por eso la base del rol es entender el origen de los datos antes de mover una sola línea de código.

Cómo cambia el flujo según la duración del proyecto

Entregar valor temprano es la regla, sin importar el tamaño del proyecto. Ya sea corto, mediano o de largo plazo, la prioridad es liberar entregables pequeños que el equipo pueda usar de inmediato [03:21].

No importa si trabajas con millones, miles o cientos de registros. Lo importante es poner los datos al alcance del data analyst o del data scientist para que empiecen a sacar insights cuanto antes.

¿Qué tipo de proyectos maneja un data engineer? Desde extracciones puntuales con cientos de registros hasta arquitecturas de big data. La constante es entregar información disponible y útil para el resto del equipo de data.

Por qué la comunicación define a un buen data engineer

La habilidad técnica no alcanza si no sabes hablar con tu equipo y con los stakeholders. La comunicación y el trabajo en equipo aparecen como las habilidades blandas más valoradas en el rol [04:44].

Necesitas conversar sobre qué información se va a extraer, qué tipo de datos son, de dónde vienen y cómo se van a conectar. Esa coordinación con quienes piden los datos es lo que evita reprocesos y entregas que no sirven.

Qué disfrutar y qué retos esperar

Entre lo más gratificante del rol está explorar tecnologías nuevas: bases de datos de todos los sabores y colores, big data y APIs con las que nunca te habías conectado [05:45].

El reto más grande suele ser justamente ese: enfrentarse a APIs desconocidas y resolverlas en equipo. Si quieres prepararte para ese tipo de desafíos, aprender a usar APIs y conectarte a distintas bases de datos es el punto de partida.

¿En qué parte del flujo de datos te ves trabajando primero? Cuéntalo en los comentarios.