Arquitecturas Lambda

Es atribuida a Nathan Marz. Se diseñó como una arquitectura escalable, tolerante a fallos y de alto procesamiento de datos.
Esta arquitectura buscaba satisfacer necesidades de procesamiento de datos en altas cantidades.
Se compone de tres capas: Batch, Serve y Speed.

• Batch: En esta capa vamos a procesar toda la información almacenada con anterioridad, desde el día anterior hasta meses.
• Serve: Dentro de esta capa es posible visualizar la información procesada desde la capa batch.
• Speed: Conforme llega la información se va a ir procesando.

En esta arquitectura, podemos ver que se hace uso tanto de la capa Batch como de la capa Speed (las cuales están enfocadas al mismo objetivo general: alimentar otro servicio), y al tenerlas combinadas, se aumenta la complejidad en cuanto a cargas de administración. Sin embargo, esta arquitectura es bastante usada, y puede ser aprovechada manejando las capas Batch y Serve para datos que puedan ser tratados de manera histórica, y trabajar en la capa Speed información que requiera ser procesada y visualizada en tiempo real, todo en un mismo proyecto. Aunque muchas veces sólo es utilizada una o dos de las tres capas que tenemos disponibles en esta arquitectura.

aparte de la arquitectura lambda me podrias indicar otras arquitecturas ? y cual me recomiendas utilizar ?

book–Big Data teaches you to build big data systems using an architecture designed specifically to capture and analyze web-scale data. This book presents the Lambda Architecture, a scalable, easy-to-understand approach that can be built and run by a small team. You’ll explore the theory of big data systems and how to implement them in practice. In addition to discovering a general framework for processing big data, you’ll learn specific technologies like Hadoop, Storm, and NoSQL databases.

Web-scale applications like social networks, real-time analytics, or e-commerce sites deal with a lot of data, whose volume and velocity

Excelente explicación no solo de la Arquitectura Lambda, sino de los casos de uso para las capas Batch y Speed es importante esto de conocer la razon de ser de cada una.

La arquitectura Lambda es atribuida a Nathan Marz, diseñada para ser escalable, tolerante a fallos y de alto procesamiento de datos.

Tiene una gran robustez, puede procesar una alta cantidad de datos. Está compuesta por tres capas:

Batch: En esta capa vamos a procesar toda la información almacenada con anterioridad, desde el día anterior hasta meses.
Serve: Dentro de esta capa es posible visualizar la data procesada de la capa batch.
Speed: Conforme llega la data se va a ir procesando.

Otro uso de Lambda, procesar grandes cantidades de datos

interesantisimo. 😃

Muy clara la explicación por parte del docente.