Me parece que nos deberian de indicar como desconectar los servicios ya que se generan facturaciones por hora, gracias
Bienvenida e introducción al curso
Iniciando con Big Data
Cloud Computing en proyectos de BigData
Introducción al manejo de datos en Cloud
Datos en Cloud
¿Qué nube debería utilizar en mi proyecto de Big Data?
Arquitecturas
Arquitecturas Lambda
Arquitectura Kappa
Arquitectura Batch
Extracción de información
Llevar tu información al cloud
Demo - Creando nuestro IDE en la nube con Python - Boto3
¿Cómo usar Boto3?
API Gateway
Storage Gateway
Kinesis Data Streams
Configuración de Kinesis Data Streams
Demo - Despegando Kinesis con Cloudformation
Kinesis Firehose
Demo - Configuración de Kinesis Firehose
Reto - Configurando Kinesis Firehose
AWS - MSK
Demo - Despliegue de un clúster con MSK
Transformación de Información
AWS - Glue
Demo - Instalando Apache Zeppelin
Creación del Developer Endpoint
Demo - Conectando nuestro developer Endpoint a nuestro Zeppelin Edpoint
Demo - Creando nuestro primer ETL - Crawling
Demo - Creando nuestro primer ETL - Ejecución
Demo - Creando nuestro primer ETL - Carga
AWS - EMR
Demo - Desplegando nuestro primer clúster con EMR
Demo - Conectándonos a Apache Zeppelin en EMR
Demo- Despliegue automático de EMR con cloudformation
AWS - Lambda
Ejemplos AWS- Lambda
Demo - Creando una lambda para BigData
Carga de Información
AWS - Athena
Demo - Consultando data con Athena
AWS - RedShift
Demo - Creando nuestro primer clúster de RedShift
AWS - Lake Formation
Consumo de información
AWS - ElasticSearch
Demo - Creando nuestro primer clúster de ElasticSearch
AWS - Kibana
AWS - QuickSight
Demo - Visualizando nuestra data con QuickSight
Seguridad, Orquestación y Automatización
Seguridad en los Datos
AWS Macie
Demo - Configurando AWS Macie
Apache Airflow
Demo - Creando nuestro primer clúster en Cloud Composer
Arquitectura de referencia
Clase pública
¿Qué es Big Data?
Aún no tienes acceso a esta clase
Crea una cuenta y continúa viendo este curso
Para esta demo vas a necesitar los siguientes comandos:
aws kafka list-clústers --region us-east-1
aws kafka describe-clúster --region us-east-1 --clúster-arn
aws kafka get-bootstrap-brokers --region us-east-1 --clúster-arn [clústerARN]
Aportes 7
Preguntas 4
Me parece que nos deberian de indicar como desconectar los servicios ya que se generan facturaciones por hora, gracias
Este tema del MSK es como pa gente que conoce Kafka, porque yo no entendi casi nada jaja
De que manera nos cobra AWS por el despliegue de MSK?
Para esta demo vas a necesitar los siguientes comandos:
aws kafka list-clústers --region us-east-1
aws kafka describe-clúster --region us-east-1 --clúster-arn
aws kafka get-bootstrap-brokers --region us-east-1 --clúster-arn [clústerARN]
The diagram demonstrates the interaction between the following components:
Broker nodes — When creating an Amazon MSK cluster, you specify how many broker nodes you want Amazon MSK to create in each Availability Zone. In the example cluster shown in this diagram, there’s one broker per Availability Zone. Each Availability Zone has its own virtual private cloud (VPC) subnet.
ZooKeeper nodes — Amazon MSK also creates the Apache ZooKeeper nodes for you. Apache ZooKeeper is an open-source server that enables highly reliable distributed coordination.
Producers, consumers, and topic creators — Amazon MSK lets you use Apache Kafka data-plane operations to create topics and to produce and consume data.
no aparece BigData
Use this resource to create an Amazon MSK cluster and to get a list of existing clusters
Query Parameters
Name Type Required Description
nextToken String False
The paginated results marker. When the result of the operation is truncated, the call returns NextToken in the response. To get the next batch, provide this token in your next request.
clusterNameFilter String False
Specify a prefix of the name of the clusters that you want to list. The service lists all the clusters whose names start with this prefix.
maxResults String False
The maximum number of results to return in the response. If there are more results, the response includes a NextToken parameter.
¿Quieres ver más aportes, preguntas y respuestas de la comunidad? Crea una cuenta o inicia sesión.