favor corregir la respuesta de la pregunta en el examen. una arquitectura que no tiene capa batch?. se respondio kappa , luego kinesis, y luego processing pero de acuerdo al o explicado y leido es KAppa
Bienvenida e introducción al curso
Iniciando con Big Data
Cloud Computing en proyectos de BigData
Introducción al manejo de datos en Cloud
Datos en Cloud
¿Qué nube deberÃa utilizar en mi proyecto de Big Data?
Arquitecturas
Arquitecturas Lambda
Arquitectura Kappa
Arquitectura Batch
Extracción de información
Llevar tu información al cloud
Demo - Creando nuestro IDE en la nube con Python - Boto3
¿Cómo usar Boto3?
API Gateway
Storage Gateway
Kinesis Data Streams
Configuración de Kinesis Data Streams
Demo - Despegando Kinesis con Cloudformation
Kinesis Firehose
Demo - Configuración de Kinesis Firehose
Reto - Configurando Kinesis Firehose
AWS - MSK
Demo - Despliegue de un clúster con MSK
Transformación de Información
AWS - Glue
Demo - Instalando Apache Zeppelin
Creación del Developer Endpoint
Demo - Conectando nuestro developer Endpoint a nuestro Zeppelin Edpoint
Demo - Creando nuestro primer ETL - Crawling
Demo - Creando nuestro primer ETL - Ejecución
Demo - Creando nuestro primer ETL - Carga
AWS - EMR
Demo - Desplegando nuestro primer clúster con EMR
Demo - Conectándonos a Apache Zeppelin en EMR
Demo- Despliegue automático de EMR con cloudformation
AWS - Lambda
Ejemplos AWS- Lambda
Demo - Creando una lambda para BigData
Carga de Información
AWS - Athena
Demo - Consultando data con Athena
AWS - RedShift
Demo - Creando nuestro primer clúster de RedShift
AWS - Lake Formation
Consumo de información
AWS - ElasticSearch
Demo - Creando nuestro primer clúster de ElasticSearch
AWS - Kibana
AWS - QuickSight
Demo - Visualizando nuestra data con QuickSight
Seguridad, Orquestación y Automatización
Seguridad en los Datos
AWS Macie
Demo - Configurando AWS Macie
Apache Airflow
Demo - Creando nuestro primer clúster en Cloud Composer
Arquitectura de referencia
Clase pública
¿Qué es Big Data?
Arquitectura Kappa
7/52Recursos
Fue presentada por Jay Krepsen en el 2014 como una evolución de la arquitectura lambda. Elimina la capa batch haciendo que todo se procese en tiempo real.
La arquitectura Kappa sigue los siguientes pilares:
- Todo es un stream.
- Información de origen no modificada.
- Solo un flujo de procesamiento.
- Capaz de reprocesar.
Aportes 15
Preguntas 2
Ordenar por:
Fue presentada por Jay Krepsen en el 2014 como una evolución de la arquitectura Lambda; consiste en eliminar la capa de batch y realizar todo el procesamiento en tiempo real (a través de la capa de streaming).
Aspectos importantes:
- Todo se maneja como un stream.
- La información origen no es modificada.
- Sólo hay un flujo de procesamiento.
- Es capaz de reprocesar información.
Esta arquitectura se fundamenta en el tiempo real, por lo cual, debemos enfocarnos aquà en los servicios de procesamiento en tiempo real.
La pregunta del examen de cual arquitectura no tiene capa batch esta mal, la respuesta es Kappa y dice que incorrecta
No comentaron las desventajas de esta arquitectura solo que es una mejora de la anterior.
La arquitectura Kappa sigue los siguientes pilares:
Todo es un stream.
Información de origen no modificada.
Solo un flujo de procesamiento.
Capaz de reprocesar.
Kappa Architecture Design
Considero que las startups le estan apuntando a esta arquitectura como es el caso de rappi
¿Una desventaja puede ser el tema de almacenamiento, porque tiene que esta disponible la data para un posible re procesamiento?
¿De AWS se podria decir que Kinesis Firehose es una herramienta de procesamiento en batch?
Fue presentada por Jay Krepsen en el 2014 como una evolución de la arquitectura lambda. Elimina la capa batch haciendo que todo se procese en tiempo real.
Kappa architecture>
Todo es un stream.
Información de origen no modificada.
Solo un flujo de procesamiento.
Capaz de reprocesar.
Kappa Architecture is a software architecture pattern. Rather than using a relational DB like SQL or a key-value store like Cassandra, the canonical data store in a Kappa Architecture system is an append-only immutable log. From the log, data is streamed through a computational system and fed into auxiliary stores for serving
Interesante Arquitectura Kappa, todo se procesa en tiempo real
excelente explicación!!
Los aportes, preguntas y respuestas son vitales para aprender en comunidad. RegÃstrate o inicia sesión para participar.