Introducci贸n al an谩lisis exploratorio de datos

1

驴Qu茅 es y para qu茅 sirve el an谩lisis exploratorio de datos?

2

驴C贸mo hacer un an谩lisis exploratorio de datos?

3

Tipos de an谩lisis de datos

4

Tipos de datos y an谩lisis de variables

5

Herramientas de software para el an谩lisis exploratorio de datos

6

Conociendo nuestros datos: palmerpenguins

7

Recolecci贸n de datos, limpieza y validaci贸n

8

Ejercicio de validaci贸n de datos

Quiz: Introducci贸n al an谩lisis exploratorio de datos

An谩lisis univariado

9

Explorando una variable categ贸rica: conteos y proporciones

10

Estad铆stica descriptiva aplicada: medidas de tendencia central

11

Estad铆stica descriptiva aplicada: medidas de dispersi贸n

12

Ejercicio de obtenci贸n de medidas de dispersi贸n

13

Estad铆stica descriptiva aplicada: distribuciones

14

Estad铆stica descriptiva aplicada: funciones de densidad de probabilidad

15

Bonus: Teorema del l铆mite central

Quiz: An谩lisis univariado

An谩lisis bivariado

16

Estableciendo relaciones: gr谩ficos de puntos

17

Estableciendo relaciones: gr谩ficos de viol铆n y boxplots

18

Estableciendo relaciones: matrices de correlaci贸n

19

Limitantes de los coeficientes de correlaci贸n lineal

20

Estableciendo relaciones: an谩lisis de regresi贸n simple

21

Limitaciones del an谩lisis de regresi贸n simple

Quiz: An谩lisis bivariado

An谩lisis multivariado

22

An谩lisis de regresi贸n m煤ltiple

23

Visualizaci贸n del an谩lisis de regresi贸n m煤ltiple

24

An谩lisis de regresi贸n log铆stica

25

Paradoja de Simpson

26

驴Qu茅 hacer cuando tengo muchas variables?

Quiz: An谩lisis multivariado

Conclusiones

27

Diversidad de gr谩ficas al explorar datos

28

Contin煤a aprendiendo sobre EDA

No tienes acceso a esta clase

隆Contin煤a aprendiendo! 脷nete y comienza a potenciar tu carrera

Compra acceso a todo Platzi por 1 a帽o

Antes: $249

Currency
$209/a帽o

Paga en 4 cuotas sin intereses

Paga en 4 cuotas sin intereses
Suscr铆bete

Termina en:

13D
12H
53M
11S

Conociendo nuestros datos: palmerpenguins

6/28
Recursos

Aportes 26

Preguntas 9

Ordenar por:

驴Quieres ver m谩s aportes, preguntas y respuestas de la comunidad?

o inicia sesi贸n.

Recuerden que pandas tambi茅n puede acceder a archivos mediante un direcci贸n URL.
En el caso del dataset que estamos estudiando ser铆a de la siguiente manera:

pre_penguin_df = pd.read_csv('https://raw.githubusercontent.com/allisonhorst/palmerpenguins/master/inst/extdata/penguins.csv')

En kaggle.com hay abuntante cantidad de datasets para practicar 馃殌馃敟

Algunas preguntas para analizar el dataset:

  • 驴Cu谩l es la vida promedio de un ping眉ino?
  • 驴Viven m谩s las hembras o los machos?
  • 驴La altura es un rasgo distintivo del sexo?
  • 驴Cu谩l es la proporci贸n altura/ancho de los picos?
  • 驴Correlaci贸n peso/sexo?
  • 驴Correlaci贸n especie pico?

馃槃 Algo curioso que encontr茅, es que los ping眉inos no poseen dimorfismo sexual y por ello es dif铆cil distinguir a los machos de las hembras.

  • Para diferenciarlos normalmente se fijan en la altura, aunque algunas especies se pueden diferenciar por los sonidos que emiten.
  • Viven entre 15 y 20 a帽os en la naturaleza.
  • Existen 18 tipos de ping眉inos en el mundo.
  • Mantienen una temperatura cororal de 40 grados cent铆grados.
  • Son mon贸gamos.
  • Los ping眉inos pueden robar los huevos de otras parejas.
  • Viven en colonias.
  • Pueden saltar muy alto (hasta 2 metros) al salir del agua.
  • Tienen una muda de su plumaje 1 vez al a帽o en primavera.
  • Pueden beber agua salada, gracias a un 贸rgano que elimina el exceso de sal.

Estos datos son generalizados y no aplican a todas las especies de pinguinos.

Usted es el mejor prefesor , desearia que diera un par de cursos que vi antes de esta misma ruta porque en serio me encanta que tenga todo preparadito y se nota que tiene experiencia

Tips en Deepnote

  • Ctrl + Enter para correr el codigo en windows
  • Command + Enter para correr el codigo en Mac

Observaci贸n

Por el momento estamos realizando el proceso ETL, este cap铆tulo hicimos la Extracci贸n de los datos de distintas maneras.

Cuando haces directamente el drag and drop del archivo .csv en Deepnote autom谩ticamente empieza a trabajar en lenguaje SQL, esto te permite hacer Querys directamente. Por ejemplo, si quisieras saber la cantidad de ping眉inos que hay seg煤n su especie podemos el siguiente C贸digo

<SELECT species, COUNT(*)
FROM 'penguins.csv'
GROUP BY species;> 

Asi mismo puedes obtener el mismo resultado usando pandas

<preprocess = pd.read_csv('penguins.csv')
conteo_especies = preprocess.groupby('species').size()
print(conteo_especies)> 

Es un dato curioso, sinceramente pienso que trabajar en SQL se ve m谩s organizado y es un poco m谩s intuitivo

Si estan en un entorno virtual de python pueden descargar el data set con el comando:

pip install palmerpenguins

Y luego importarlos en su notebook con:

import palmerpenguins

Para agilizar los procesos, pueden dejar el click del mouse sobre el icono y as铆 ven los atajos de teclado que tienen por defectos los software de programaci贸n, s铆 est谩n en DeepNote, yo uso:

crt + j : Para a帽adir una nueva l铆nea de c贸digo
crt + shit + delet : Para borrar una l铆nea de c贸digo
crt + Enter : Para ejecutar el comando

Con esos 3 se facilita bastante el trabajo

como aclaraci贸n creo que la columna de 鈥淪ex鈥 no es el mejor ejemplo de la diferencia de los datos preprocesados pues tambi茅n cuenta con los mismo datos faltantes en ambos df.

`%%capture` `!pip install palmerpenguins` `import pandas as pd` `from palmerpenguins import load_penguins` `penguins = load_penguins()` `penguins.head()`
Una de las herramientas b谩sicas para An谩lisis Exploratorio de Daros que he usado es Excel. Con todo lo que se dice bueno o malo, se puede realizar hasta cierto punto para esta tarea. Puede que no sea la herramienta m谩s robusta pero funciona para ciertos fines, sobretodo si vas comenzando en este tema.
Holaa, espero se encuentren bien, no encontr茅 la ruta para ingresar a Deepnote, por favor me la pueden compartir. Gracias :)

Descripci贸n Ping眉ino Adelia
Tama帽o mediano (aprox. 70 cm de longitud acostado y 3,9 a 5,35 Kg), la hembra suele ser significativamente m谩s peque帽a. Cabeza, barbilla, garganta, partes superiores del cuerpo, espalda y cola negro-azulados. Partes inferiores y vientre blancos. Aletas negro-azuladas en su superficie dorsal, pero con un estrecho borde blanco. Cola formando una caracter铆stica 鈥渃ola en pincel鈥. Ojos marrones, rodeados por un c铆rculo blanco distintivo. Pico negro, cubierto de plumas en la mitad de su longitud, dando apariencia de ser m谩s corto. Patas cubiertas de plumas blancas. Pies rosados con suela negra.

Descripci贸n Ping眉ino Emperador
115-120 cm de altura, peso 22 a 40 Kg. Es el m谩s alto y pesado de todas las especies de ping眉inos. Machos y hembras similares en plumaje y tama帽o, aunque los machos son ligeramente m谩s grandes. Cabeza negra, pecho amarillo p谩lido y parches auriculares de color amarillo brillante. Los adultos tienen el dorso gris oscuro y 谩reas ventrales blancas. Pico superior negro, laterales del pico inferior de rosa a naranja. Pichones color gris p谩lido, cabeza y pico negros, parches oculares y barbilla blancos. Los pichones pasan por dos capas de plum贸n antes de alcanzar su plumaje juvenil.

Descripci贸n ping眉ino Rey
Es la segunda especie de ping眉inos m谩s grande (80-90 cm de altura, 14-16 Kg.). Las hembras tienden a ser m谩s peque帽as que los machos, pero ambos sexos tienen el plumaje similar: dorso de color negro azulado, ventralmente blanco, garganta negra, parches auriculares de color naranja brillante que se extienden hacia el cuello y el pecho. La parte superior del pecho es naranja y se desvanece a amarillo y blanco hacia el vientre. El plumaje de los juveniles es similar a los adultos, pero los parches auriculares son menos brillantes. La garganta es de color blanco gris谩ceo, las plumas de la corona negras con puntas grises, placas mandibulares negras con rosa. Despu茅s de dos a帽os los juveniles mudan al plumaje adulto. Los pichones nacen de color marr贸n gris谩ceo.
[Fuente: https://www.globalpenguinsociety.org/]

Columna Descripci贸n
species La especie del ping眉ino, puede ser Adelie, Gentoo o Chinstrap.
island La isla en la que se encontr贸 el ping眉ino.
bill_length_mm Longitud del pico en mil铆metros.
bill_depth_mm Profundidad del pico en mil铆metros.
flipper_length_mm Longitud de la aleta en mil铆metros.

Algunas preguntas:
Entre machos y hembras cual tiene mayor masa?
Cuales son las especies que predominan en cada isla?
Existe una relacion entre el bill lenght y el bill_depth?

  • 驴Que familia de pinguinos son los mas grendes, (pesados y altos)?
  • 驴cuanto viven en promedio los pinguinos?
  • 驴cuantos mini-pinguinos pueden tener, cuantas veces a lo largo de su vida?
    -驴el sexo de los pinguinos influye en su tama帽o?
  1. 驴Cu谩les son las caracter铆sticas de tama帽o m谩s comunes de los ping眉inos Adelie?

  2. 驴Hay alguna relaci贸n entre el tama帽o de los ping眉inos y su lugar de origen?

  3. 驴C贸mo ha cambiado el tama帽o de los ping眉inos Adelie a lo largo del tiempo?

Diferencias geogr谩ficas: los pinguinos Adelie de diferentes lugares pueden tener caracter铆sticas de tama帽o diferentes debido a factores como la disponibilidad de alimento o las condiciones clim谩ticas locales.

Diferencias temporales:

los pinguinos Adelie de diferentes 茅pocas pueden tener diferencias en su tama帽o debido a factores como la variaci贸n en la disponibilidad de alimento a lo largo del tiempo.

Diferencias de sexo:

los pinguinos machos y hembras pueden tener diferencias en el tama帽o debido a la selecci贸n sexual y la competencia por recursos.

Que especie de pinguino tiene mayor indice de masa corporal?
Que especie de pinguino tiene mayor numero de hembras y cual de machos?
Existira diferencia entre el tama帽o del pico y aletas segun su sexo ?

驴Alguna especie tendr谩 un rasgo significativo para diferencias mujeres y hombres? De ser as铆 cual ser铆a ese rasgo, o si no hay demostrar que no hay forma de diferenciarlos con las variables categ贸ricas estudiadas.

Preguntas que tengo al respecto:

  • En cada especie 驴los machos pesan m谩s que las hembras?
  • 驴Cu谩l es el peso promedio de los pinguinos?
  • 驴Hay relaci贸n entre la isla en la que vive cada especie y el peso del pinguino?
  • 驴Existe relaci贸n entre el tama帽o de las alas y el sexo del pinguino?
  • 驴Qu茅 especie de ping眉ino es la m谩s alta y baja en el dataset?

Para poder realizar las preguntas adecuadas es superimportante conocer y leer sobre el tema.

驴El largo o ancho del pico nos puede indicar la edad o el sexo?
驴Si agrupo los ping眉inos por regi贸n que caracter铆sticas fisiol贸gicas compartir谩n?

Preguntas que se me ocurren:

  • 驴A帽os qu茅 viven

  • A partir de qu茅 edad suelen tener cr铆as

  • 脡poca del a帽o m谩s favorables para la reproducci贸n

  • Edad apta para la caza

  • Tama帽o promedio en machos y hembras

  • Tama帽o promedio en razas de ping眉inos

  • Probabilidad de morir sin generar cr铆as, segmentado por raza

Algunas preguntas pueden ser:

  • 驴C贸mo es la distribuci贸n de sexo, teniendo en cuenta la isla y especie?
  • 驴La longitud del pico es mayor en el sexo masculino o femenino?
  • 驴Qu茅 sexo en ping眉inos es m谩s longevo?
    -驴Cu谩l sexo en ping眉inos tiene un peso mayor?
  • 驴Cu谩l pesa m谩s?
  • 驴Qui茅n tiene mayor altura?
  • 驴El pico es el factor m谩s importante para conocer el sexo del pinguino?