Conociendo Apache Spark
Todo lo que aprenderás sobre Spark para Big Data
Introducción a Apache Spark
Introducción a los RDDs y DataFrames
Configuración
Instalación del ambiente de trabajo
Jupyter vs CLI: ejecución de Spark desde la línea de comandos
Jupyter vs CLI: ejecución de Spark en Jupyter Notebook
Operaciones RDDs
RDD y DataFrames
Transformaciones y acciones
Acciones de modificación sobre RDDs
Acciones de conteo sobre RDDs
Solución reto deportistas
Operaciones numéricas
Data Frames y SQL
Creación de DataFrames
Inferencia de tipos de datos
Operaciones sobre DF
Agrupaciones y operaciones join sobre DF
Solución reto joins
Funciones de agrupación
SQL
¿Qué es un UDF?
UDF
Persistencia y particionado
Particionado
Comprendiendo la persistencia y particionado
Particionando datos
Conclusiones
Conclusiones
Aportes 17
Preguntas 2
con humildad les comparto mis apuntes sobre el curso, es buenísimo, y si le hacen fork dejen su Estrellita en el repo, devuelvan algo a la comunidad de platzi, y nunca paren de aprender.
https://github.com/rb-one/Cuso_Introductorio_de_Spark/blob/master/Notes/notes.md
Para todos los que desean iniciar en la ingeniería de datos con Spark, les comparto este meetup que tuvimos en la comunidad de Apache Spark MX
Espero les sea de ayuda!
Hola, para los que comienzan el curso: Este es un curso que está orientado a Spark en Python, es decir PySpark. En el camino te encontrarás con complicaciones para configurar el ambiente, no te limites por eso. Configura en Google Colab y sigue el curso desde allí. Aquí un compañero te indica como: https://platzi.com/comentario/2309466/
Spark es útil y muy buscado sobretodo en Europa. Se utiliza constantemente con AWS junto con la funcionalidad de EMR. Este curso fue clave para conseguir mi actual trabajo. Ánimo y disfruta mucho el curso!
Aprovecho para invitarlos a unirse a las comunidades de Spark:
México
https://www.meetup.com/apache-spark-mexicocity/
Colombia
https://www.meetup.com/Apache-Spark-Bogota
Me parece increíble que Platzi tenga un curso de Spark, todos me recomiendan aprender esto, que es el futuro
Me encantó la introducción :3
Con mucho entusiasmo inicio este curso con ganas de aprender los fundamentos de Apache Spark
Comparto notas de clase
Desde el 2 de Febrero se creó la Unidad De Innovación y Transformación Digital en la empresa donde trabajo y uno de los desafios estrella es el relqcionado con Big Data por tanto estoy muy entusiasta y con mucha espectativa del presente curso.
Genial!!! Ya sé SQL y POO, estoy listo para tomar este curso!
Gracias por el curso!
Hola!
Por fin a empezar a este curso
No sabía que Platzi tenía curso de Spark. Curiosamente en mi trabajo usamos PySpark (y cuando entré no tenia ni idea >-<), vamos a ver este curso que más me puede aportar 😄
Si usas Windows, corre!
Vamos con toda!!!
Muy buen comienzo…! 😃
¿Quieres ver más aportes, preguntas y respuestas de la comunidad?
o inicia sesión.