BigQuery DataStudio y Pub/Sub para automatización de eventos

Bigquery: Análisi en tiempo real de grandes volúmenes de datos.

• Generar Data warehouse, totalmente administrado.
• Cómputo y almacenamiento se gestionan de forma independiente.
  Pub/Sub: Mensajería asíncrona- muchos a muchos
• Suscripción mediante push/pull
• Ingesta de datos en streaming o batch
• Automatiza eventos en base de eventos.

al final…
https://cloud.google.com/bigquery
https://cloud.google.com/pubsub
venir por primera vez a aprender sobre GCP, y perderse en la abstracción de conceptos en un discurso, y luego quedar en las mismas…
Resulta mejor y más práctico mirar los casos de uso y ejemplos sobre la misma ayuda de la plataforma…
Lo que de realmente puedo agradecer, es que estas clases me brindan todo ese listado de conceptos críticos para en las industrias que trabajan con GCP…

Big query

• Accede a las información ha manera de columnas especificas.
• Data warehouse en la nube.
• No cuenta con una limitante de información, lo más interesante es el tiempo de respuesta.
• Sin gestionar escalamiento.
• Sólo se paga por el almacenamiento usado.
• Se puede ejecutar desde la web, línea de comando, o conexión ODBC

Recurso para empezar a probar Bigquery https://cloud.google.com/bigquery/docs/quickstarts/quickstart-web-ui?hl=es-419

demasiadas palabras tecnicas me marean

Aquí hay un tutorial para poder aterrizar un poco los conceptos y practicar. https://cloud.google.com/bigquery/docs/tutorials

Utiliza un dataset público con información de github!

Pub Sub es similar a Kinesis de AWS

Pub/Sub a ti te estaba buscando…

Pub/Sub es u kafka!

consultas gratis!!!.
lenguaje sql para no complicarnos las cosas.

Genial!

Que genios, distribuir una consulta por varios grupos de datos para procesamiento en paralelo

PUB/SUB es el equivalente a Apache Kafka?

Actualización urgente de este curso.!

hay ejemplo de paginas web

¿Podríamos considerar a Pub/Sub el equivalente de Colud Functions pero a una escala mayor?

Sería bueno una demostración de migración a nube de SQL 2016

Ventajas de Bigquery:
-Acceder a la información que tenemos almacenada en tablas (a manera de columnas).
-Acceder a columnas especificas, sin traer otros campos o registros.
Esto provee una **facilidad ** y optimizan los tiempos de respuesta.

1.5x power !!! c:

Cual seria un usecase de una subscription PUSH y una subscription PULL?

Pub/Sub
Cuando se almacene un Objeto (un archivo que ya subimos xej.) se ejecute un evento de Pub/Sub.
Esto seria una suscripción de tipo Push .

Caso de Uso para Bigquery:
-Generar un Data Warehouse en la nube (Sistema completamente administrado por el proveedor). Esto se usa para que solo almacenemos nuestra información y consumirla.

Bigquery

En Big query hay operaciones gratuitas:

• los primeros 10 Gb del mes el almacenamiento
• El primer Tb del mes es gratuito
• Cuando cargas datos en BigQuery desde Cloud Storage. Solo se cobra el almacenamiento de dichos datos en Cloud Storage
• Por copiar tablas. Se cobra por el almacenamiento
• Exportar datos a Cloud Storage. Se cobra por el almacenamiento de Cloud Storage
• Eliminar tablas, particiones, vistas, funciones, conjuntos de datos
• Leer metadata

Hojas conectadas permite a los usuarios analizar miles de millones de filas de datos en vivo de BigQuery en las Hojas de cálculo de Google sin necesidad de contar con conocimientos sobre SQL.

Como se gestiona la seguridad, si solo se quiere que desde un programa pueda consultar solo algunas tablas?

Muy interesante, pero seria mas interesante algo practico

Sí sería interesante ver ejemplos prácticos pues así está complicado entenderlo.
Claro es curso introductorio pero no estaría de más.