CursosEmpresasBlogLiveConfPrecios

¿Por qué usar airflow?

Clase 3 de 29 • Curso de Fundamentos de Apache Airflow

Clase anteriorSiguiente clase

Contenido del curso

Introducción a Apache Airflow

  • 1
    Introducción al curso

    Introducción al curso

    03:05 min
  • 2
    ¿Para qué sirve airflow?

    ¿Para qué sirve airflow?

    05:34 min
  • 3
    ¿Por qué usar airflow?

    ¿Por qué usar airflow?

    Viendo ahora
  • 4
    Resumen módulo 1

    Resumen módulo 1

    00:47 min

Conceptos básicos

  • 5
    DAG

    DAG

    02:33 min
  • 6
    Tasks y Operators

    Tasks y Operators

    02:13 min
  • 7
    Scheduler

    Scheduler

    02:04 min

Instalación y configuración

  • 8
    Instalación de Apache Airflow usando Docker

    Instalación de Apache Airflow usando Docker

    03:14 min
  • 9
    Posibles configuraciones

    Posibles configuraciones

    04:34 min
  • 10
    Variables y conexiones

    Variables y conexiones

    04:15 min

Implementando un DAG

  • 11
    Implementando un DAG

    Implementando un DAG

    05:57 min
  • 12
    Bash Operator

    Bash Operator

    03:47 min
  • 13
    Python Operator

    Python Operator

    04:20 min
  • 14
    Definiendo dependencias entre tareas

    Definiendo dependencias entre tareas

    06:23 min
  • 15
    Custom Operator

    Custom Operator

    06:40 min

Orquestar y monitorizar procesos

  • 16
    Orquestando un DAG I

    Orquestando un DAG I

    10:31 min
  • 17
    Orquestando un DAG II

    Orquestando un DAG II

    06:32 min
  • 18
    Monitoring

    Monitoring

    07:22 min
  • 19
    Task Actions

    Task Actions

    13:13 min
  • 20
    Trigger Rules

    Trigger Rules

    14:18 min

Sensores

  • 21
    ¿Qué son los sensores?

    ¿Qué son los sensores?

    01:16 min
  • 22
    ExternalTaskSensor

    ExternalTaskSensor

    06:16 min
  • 23
    FileSensor

    FileSensor

    07:02 min

Templates con Jinja

  • 24
    ¿Qué son los templates con Jinja?

    ¿Qué son los templates con Jinja?

    06:48 min

XComs

  • 25
    ¿Qué son los Xcoms?

    ¿Qué son los Xcoms?

    06:17 min

BranchPythonOperator

  • 26
    BranchPythonOperator

    BranchPythonOperator

    05:40 min

Proyecto

  • 27
    Definición del proyecto

    Definición del proyecto

    03:41 min

Cierre del curso

  • 28
    Cierre del curso

    Cierre del curso

    01:35 min
  • 29

    Comparte tu proyecto de Platzi explora el espacio con Airflow y certifícate

  • Tomar el examen del curso
    • Andres Insuasty

      Andres Insuasty

      student•
      hace 3 años

      A mi me interesa aprender de airflow porque es la forma en la que salimos a producción en mi trabajo. Los productos de datos salen por airflow. Saberlo manejar mejor creo que a todos no va a servir para potencializar nuestro impacto

        Mi Chu

        Mi Chu

        student•
        hace 3 años

        En las vacantes de data (cualquier rol) piden tanto airflow como spark 🙌

      Isay Humberto Lucas Hernandez

      Isay Humberto Lucas Hernandez

      student•
      hace 3 años

      Me interesa aprender AirFlow porque allá afuera es el estándar. Y aparte de la documentación, hay pocos cursos o recursos de entrenamiento. Este curso vino como anillo al dedo a todos los perfiles de data en formación (en especial a los data Engineers).

        Eric Bellet

        Eric Bellet

        teacher•
        hace 3 años

        Totalmente de acuerdo Isay!

      Juan Sebastián Vargas Castañeda

      Juan Sebastián Vargas Castañeda

      student•
      hace 3 años

      En mi caso porque estoy transitando de Data Analyst a Data Engineer, y en la arquitectura del proyecto que voy a comenzar se está requiriendo Apache Airflow para construir un ETL.

        Eric Bellet

        Eric Bellet

        teacher•
        hace 3 años

        Genial Juan, esa transición es muy interesante porque vas a tener las 2 visiones

      Leandro Gabriel Kategora

      Leandro Gabriel Kategora

      student•
      hace 3 años

      a mi me interesa especialmente porque tengo varios procesos de ETL que fui armando pero no estan automatizados, y la verdad porque me gusta bastante la ingenieria de datos

        Eric Bellet

        Eric Bellet

        teacher•
        hace 3 años

        Seguro te va a ser de mucha utilidad!

      Leonardo Carvallo

      Leonardo Carvallo

      student•
      hace 3 años

      Es correcto, reviso más Airflow que el mail, leer log y hacer pruebas en Airflow ocupa un porcentaje importante de mi día.

      Flavio Mamani conde

      Flavio Mamani conde

      student•
      hace 3 años

      yo quiero aprender porque lo necesito para un proyecto q lo tengo q entregar en unas horas. jaja bueno no. solo quiero automatizar un flujo de trabajo...

      Freddy Norberto Montañez Gordillo

      Freddy Norberto Montañez Gordillo

      student•
      hace 3 años

      Como Ingeniero BI y de datos siempre es bueno estar a la vanguardia de las ultimas tecnologias. Hace poco un proyecto potencial que usa la herramienta despertó mi curiosidad y me pareció interesante aprenderla.

        Eric Bellet

        Eric Bellet

        teacher•
        hace 3 años

        Y seguramente te la seguirás encontrando

      Daniel da Silva Jarque

      Daniel da Silva Jarque

      student•
      hace 2 años

      En mi trabajo la evolución ha sido:

      1. Programas batch en Java.
      2. QlikView.
      3. Power BI.
      4. Pentaho Data Integration (PDI).

      Inevitablemente, acabas llegando a Python y al workflow. He automatizado en jobs de PDI scripts en Python (de manera síncrona), pero comienzan a surgir nuevas necesidades y complejidades en esta “capa de la cebolla”, como carga de procesador, etc.

      Solución para organizar el workflow: Apache Airflow, por supuesto!!! 😃

      Patricia Velazquez

      Patricia Velazquez

      student•
      hace 2 años

      En mi caso por que voy a comenzar un nuevo puesto de Business Analyst, y sé que utílizan Astronomer, qué es una empresa que fácilita el uso de Airflow con una interfáz simple y algunas funcionalidades extra, y quiero ver el alcance de como funciona.

      Juan Antonio Aramburo Pasapera

      Juan Antonio Aramburo Pasapera

      student•
      hace 2 años

      Yo quiero aprender apache porque justo entre a un trabajo en el que utilizan apache airflow para orquestar los etls. Así que quiero aprenderlo antes de terminar el onboarding para entrar con todo a la chamba.

      Jose Colmenares

      Jose Colmenares

      student•
      hace 2 años

      Soy Data Engineer para una empresa llamada ClarityAI y Airflow es el backbone de todos nuestro procesos. Airflow y Docker para gestionar las ETLs, vine al curso a validar si me faltaban cosas por aprender o incluir a mi procesos

        Eric Bellet

        Eric Bellet

        teacher•
        hace 2 años

        Espero que puedas aprender algo nuevo :)

      Alfonso Andres Zapata Guzman

      Alfonso Andres Zapata Guzman

      student•
      hace 3 años

      Me interesa aprender esta tecnologia, por la razon de quien no evoluciona esta destinado a extinguirse, hágase el simil a tecnologia.

      Se ve muy buena esta herramienta, y ya habiendo trabajo en el curso de MLOps de platzi, con creacion de flujos CI/CD, he entendido lo potente que pueden ser herramiendas como DVC y otras.

      Lo usaremos o no en nuestro proximo trabajo, quizas si o quizas no, pero igual mantenerse actualizado en tecnologias siempre es bueno a nivel general.

      Me gustaria eso si, un curso de Kubeflow, ya que a mi me suena un poquito mas interesante que esta herramienta.


      ~ Por cierto, ya conectamos en LinkedIn? ~

      Conectemos en LinkedIn, GitHub, Medium o Redes sociales

      Luis Ernesto Domínguez Velásquez

      Luis Ernesto Domínguez Velásquez

      student•
      hace un año

      A mi me interesa aprender Airflow porque hace 4 años que he incursionado en el mundo de los datos como Analista de Datos, algo de Científico de Datos y en este último semestre de 2024 realicé una consultoría de automatización de proceso y BI financiero (MariaDB, Python, Tableau PREP, Tableau Desktop) y es muy probable que en el 2025 inicie una segunda fase para implementar un ecosistema Big Data con MariaDB ColumStore y todo lo necesario incluido Airflow.

      Ruben Dario Toro Gutierrez

      Ruben Dario Toro Gutierrez

      student•
      hace 3 años

      en mi actual trabajo no utilizamos esta herramienta, todo se hace sobre SAS Enterprise Guide, pero me interesa aprender airflow principalmente por expandir mis conocimientos en nuevas herramientas y nuevas formas de hacer las cosas, en el momento en que quiera buscar nuevas oportunidades laborales estar preparado

      Camilo Corredor

      Camilo Corredor

      student•
      hace 2 años

      Particularmente, lo que hice para "orquestar" procesos y generar alertas ante fallos, es una pequeña librería que me envía emails al encontrar fallos. Sin embargo, la compañia para la que trabajo, espera implementar Airflow como herramienta sólida para orquestar ETL. Por lo anterior, mi interés.

      Randy José Agustín Montenegro Socha

      Randy José Agustín Montenegro Socha

      student•
      hace 8 meses

      Me gustaría aprender Apache AirFlow porque actualmente en mi trabajo estamos explorando alternativas open source para implementar flujos de procesos y orquestaciones.

      Luis Ochoa

      Luis Ochoa

      student•
      hace 5 meses

      En este momento estoy estudiando para ser un BI developer y creo que una herramienta que permita monitorizar procesos de ETL es supremamente importante.

      Ezequiel Vásquez

      Ezequiel Vásquez

      student•
      hace 9 meses

      Seré directo: Estoy sacando una especialización en otra plataforma (con patrocinio) y ví que el temario incluye ETL, así que busqué ETL en Platzi y heme aquí.

      Giannina Stefania Baccelliere Mancilla

      Giannina Stefania Baccelliere Mancilla

      student•
      hace 3 años

      A mi me interesa aprender de airflow porque es la forma en la que salimos a producción en mi trabajo. Los productos de datos salen por airflow.

        Eric Bellet

        Eric Bellet

        teacher•
        hace 2 años

        Excelente Giannina, ¿y ya has desplegado algún DAG en producción?

      César Vega

      César Vega

      student•
      hace 3 años

      Me interesa aprenderlo porque dentro de soporte a temas de investigaciones lo requiero para hacer ejecuciones en diferentes arquitecturas (cloud, private cloud y on-premise) que poseen diferentes formas de acceso (SSH, HTTP, FTP, entre otras) y que se requieren de diversos flujos de trabajo

    Escuelas

    • Desarrollo Web
      • Fundamentos del Desarrollo Web Profesional
      • Diseño y Desarrollo Frontend
      • Desarrollo Frontend con JavaScript
      • Desarrollo Frontend con Vue.js
      • Desarrollo Frontend con Angular
      • Desarrollo Frontend con React.js
      • Desarrollo Backend con Node.js
      • Desarrollo Backend con Python
      • Desarrollo Backend con Java
      • Desarrollo Backend con PHP
      • Desarrollo Backend con Ruby
      • Bases de Datos para Web
      • Seguridad Web & API
      • Testing Automatizado y QA para Web
      • Arquitecturas Web Modernas y Escalabilidad
      • DevOps y Cloud para Desarrolladores Web
    • English Academy
      • Inglés Básico A1
      • Inglés Básico A2
      • Inglés Intermedio B1
      • Inglés Intermedio Alto B2
      • Inglés Avanzado C1
      • Inglés para Propósitos Específicos
      • Inglés de Negocios
    • Marketing Digital
      • Fundamentos de Marketing Digital
      • Marketing de Contenidos y Redacción Persuasiva
      • SEO y Posicionamiento Web
      • Social Media Marketing y Community Management
      • Publicidad Digital y Paid Media
      • Analítica Digital y Optimización (CRO)
      • Estrategia de Marketing y Growth
      • Marketing de Marca y Comunicación Estratégica
      • Marketing para E-commerce
      • Marketing B2B
      • Inteligencia Artificial Aplicada al Marketing
      • Automatización del Marketing
      • Marca Personal y Marketing Freelance
      • Ventas y Experiencia del Cliente
      • Creación de Contenido para Redes Sociales
    • Inteligencia Artificial y Data Science
      • Fundamentos de Data Science y AI
      • Análisis y Visualización de Datos
      • Machine Learning y Deep Learning
      • Data Engineer
      • Inteligencia Artificial para la Productividad
      • Desarrollo de Aplicaciones con IA
      • AI Software Engineer
    • Ciberseguridad
      • Fundamentos de Ciberseguridad
      • Hacking Ético y Pentesting (Red Team)
      • Análisis de Malware e Ingeniería Forense
      • Seguridad Defensiva y Cumplimiento (Blue Team)
      • Ciberseguridad Estratégica
    • Liderazgo y Habilidades Blandas
      • Fundamentos de Habilidades Profesionales
      • Liderazgo y Gestión de Equipos
      • Comunicación Avanzada y Oratoria
      • Negociación y Resolución de Conflictos
      • Inteligencia Emocional y Autogestión
      • Productividad y Herramientas Digitales
      • Gestión de Proyectos y Metodologías Ágiles
      • Desarrollo de Carrera y Marca Personal
      • Diversidad, Inclusión y Entorno Laboral Saludable
      • Filosofía y Estrategia para Líderes
    • Diseño de Producto y UX
      • Fundamentos de Diseño UX/UI
      • Investigación de Usuarios (UX Research)
      • Arquitectura de Información y Usabilidad
      • Diseño de Interfaces y Prototipado (UI Design)
      • Sistemas de Diseño y DesignOps
      • Redacción UX (UX Writing)
      • Creatividad e Innovación en Diseño
      • Diseño Accesible e Inclusivo
      • Diseño Asistido por Inteligencia Artificial
      • Gestión de Producto y Liderazgo en Diseño
      • Diseño de Interacciones Emergentes (VUI/VR)
      • Desarrollo Web para Diseñadores
      • Diseño y Prototipado No-Code
    • Contenido Audiovisual
      • Fundamentos de Producción Audiovisual
      • Producción de Video para Plataformas Digitales
      • Producción de Audio y Podcast
      • Fotografía y Diseño Gráfico para Contenido Digital
      • Motion Graphics y Animación
      • Contenido Interactivo y Realidad Aumentada
      • Estrategia, Marketing y Monetización de Contenidos
    • Desarrollo Móvil
      • Fundamentos de Desarrollo Móvil
      • Desarrollo Nativo Android con Kotlin
      • Desarrollo Nativo iOS con Swift
      • Desarrollo Multiplataforma con React Native
      • Desarrollo Multiplataforma con Flutter
      • Arquitectura y Patrones de Diseño Móvil
      • Integración de APIs y Persistencia Móvil
      • Testing y Despliegue en Móvil
      • Diseño UX/UI para Móviles
    • Diseño Gráfico y Arte Digital
      • Fundamentos del Diseño Gráfico y Digital
      • Diseño de Identidad Visual y Branding
      • Ilustración Digital y Arte Conceptual
      • Diseño Editorial y de Empaques
      • Motion Graphics y Animación 3D
      • Diseño Gráfico Asistido por Inteligencia Artificial
      • Creatividad e Innovación en Diseño
    • Programación
      • Fundamentos de Programación e Ingeniería de Software
      • Herramientas de IA para el trabajo
      • Matemáticas para Programación
      • Programación con Python
      • Programación con JavaScript
      • Programación con TypeScript
      • Programación Orientada a Objetos con Java
      • Desarrollo con C# y .NET
      • Programación con PHP
      • Programación con Go y Rust
      • Programación Móvil con Swift y Kotlin
      • Programación con C y C++
      • Administración Básica de Servidores Linux
    • Negocios
      • Fundamentos de Negocios y Emprendimiento
      • Estrategia y Crecimiento Empresarial
      • Finanzas Personales y Corporativas
      • Inversión en Mercados Financieros
      • Ventas, CRM y Experiencia del Cliente
      • Operaciones, Logística y E-commerce
      • Gestión de Proyectos y Metodologías Ágiles
      • Aspectos Legales y Cumplimiento
      • Habilidades Directivas y Crecimiento Profesional
      • Diversidad e Inclusión en el Entorno Laboral
      • Herramientas Digitales y Automatización para Negocios
    • Blockchain y Web3
      • Fundamentos de Blockchain y Web3
      • Desarrollo de Smart Contracts y dApps
      • Finanzas Descentralizadas (DeFi)
      • NFTs y Economía de Creadores
      • Seguridad Blockchain
      • Ecosistemas Blockchain Alternativos (No-EVM)
      • Producto, Marketing y Legal en Web3
    • Recursos Humanos
      • Fundamentos y Cultura Organizacional en RRHH
      • Atracción y Selección de Talento
      • Cultura y Employee Experience
      • Gestión y Desarrollo de Talento
      • Desarrollo y Evaluación de Liderazgo
      • Diversidad, Equidad e Inclusión
      • AI y Automatización en Recursos Humanos
      • Tecnología y Automatización en RRHH
    • Finanzas e Inversiones
      • Fundamentos de Finanzas Personales y Corporativas
      • Análisis y Valoración Financiera
      • Inversión y Mercados de Capitales
      • Finanzas Descentralizadas (DeFi) y Criptoactivos
      • Finanzas y Estrategia para Startups
      • Inteligencia Artificial Aplicada a Finanzas
      • Domina Excel
      • Financial Analyst
      • Conseguir trabajo en Finanzas e Inversiones
    • Startups
      • Fundamentos y Validación de Ideas
      • Estrategia de Negocio y Product-Market Fit
      • Desarrollo de Producto y Operaciones Lean
      • Finanzas, Legal y Fundraising
      • Marketing, Ventas y Growth para Startups
      • Cultura, Talento y Liderazgo
      • Finanzas y Operaciones en Ecommerce
      • Startups Web3 y Blockchain
      • Startups con Impacto Social
      • Expansión y Ecosistema Startup
    • Cloud Computing y DevOps
      • Fundamentos de Cloud y DevOps
      • Administración de Servidores Linux
      • Contenerización y Orquestación
      • Infraestructura como Código (IaC) y CI/CD
      • Amazon Web Services
      • Microsoft Azure
      • Serverless y Observabilidad
      • Certificaciones Cloud (Preparación)
      • Plataforma Cloud GCP

    Platzi y comunidad

    • Platzi Business
    • Live Classes
    • Lanzamientos
    • Executive Program
    • Trabaja con nosotros
    • Podcast

    Recursos

    • Manual de Marca

    Soporte

    • Preguntas Frecuentes
    • Contáctanos

    Legal

    • Términos y Condiciones
    • Privacidad
    • Tyc promociones
    Reconocimientos
    Reconocimientos
    Logo reconocimientoTop 40 Mejores EdTech del mundo · 2024
    Logo reconocimientoPrimera Startup Latina admitida en YC · 2014
    Logo reconocimientoPrimera Startup EdTech · 2018
    Logo reconocimientoCEO Ganador Medalla por la Educación T4 & HP · 2024
    Logo reconocimientoCEO Mejor Emprendedor del año · 2024
    De LATAM conpara el mundo
    YoutubeInstagramLinkedInTikTokFacebookX (Twitter)Threads