Análisis exploratorio de datos

Comprender la ciencia de datos

Hadrien Lacroix

Content Developer at DataCamp

¿Qué es EDA?

Análisis exploratorio de datos:

  • Explorar los datos
  • Formular hipótesis
  • Evaluar características
  • Visualizar

photograph-of-john-tukey

Comprender la ciencia de datos

Flujo de trabajo de datos

Flujo de trabajo de ciencia de datos

Comprender la ciencia de datos

Sumerjámonos de lleno

Dataset 1        Dataset 2        Dataset 3        Dataset 4        
|x    |y    |    |x    |y    |    |x    |y    |    |x    |y    |
|-----|-----|    |-----|-----|    |-----|-----|    |-----|-----|    
|10.0 |8.04 |    |10.0 |9.14 |    |10.0 |7.46 |    |8.0  |6.58 |
|8.0  |6.95 |    |8.0  |8.14 |    |8.0  |6.77 |    |8.0  |5.76 |
|13.0 |7.58 |    |13.0 |8.74 |    |13.0 |12.74|    |8.0  |7.71 |
|9.0  |8.81 |    |9.0  |8.77 |    |9.0  |7.11 |    |8.0  |8.84 |
|11.0 |8.33 |    |11.0 |9.26 |    |11.0 |7.81 |    |8.0  |8.47 |
|14.0 |9.96 |    |14.0 |8.10 |    |14.0 |8.84 |    |8.0  |7.04 |
|6.0  |7.24 |    |6.0  |6.13 |    |6.0  |6.08 |    |8.0  |5.25 |
|4.0  |4.26 |    |4.0  |3.10 |    |4.0  |5.39 |    |19.0 |12.50|
|12.0 |10.84|    |12.0 |9.13 |    |12.0 |8.15 |    |8.0  |5.56 |
|7.0  |4.82 |    |7.0  |7.26 |    |7.0  |6.42 |    |8.0  |7.91 |
|5.0  |5.68 |    |5.0  |4.74 |    |5.0  |5.73 |    |8.0  |6.89 |
Comprender la ciencia de datos

¡Sorpresa!

Los cuatro conjuntos de datos muestran:

  • media y varianza idénticas para x
  • media y varianza idénticas para y
  • coeficiente de correlación idéntico
  • ecuación de regresión lineal idéntica

$$

En resumen: se parecen bastante

Comprender la ciencia de datos

El cuarteto de Anscombe

cuarteto de Anscombe

Comprender la ciencia de datos

gráfico lineal de Anscombe

Comprender la ciencia de datos

gráfico no lineal de Anscombe

Comprender la ciencia de datos

la regresión de Anscombe alterada

Comprender la ciencia de datos

correlación de Anscombe alterada

Comprender la ciencia de datos

two-rockets-landing-at-the-same-time

Comprender la ciencia de datos

Conocer tus datos

  • Número de vuelo (número)
  • Fecha (fecha y hora)
  • Hora (UTC) (fecha y hora)
  • Versión Booster (texto)
  • Sitio de lanzamiento (texto)
  • Carga útil (texto)
  • Masa de la carga útil (kg) (número)
  • Órbita (texto)
  • Cliente (texto)
  • Resultado de la misión (texto)
  • Resultado de aterrizaje (texto)
Comprender la ciencia de datos

Vista previa de tus datos

Flight  Date         Time (UTC)  Booster Version  Launch Site     Payload
_______________________________________________________________________________________________________
1       2010-06-04   18:45:00    F9 v1.0 B0003    CCAFS LC-40    Dragon Spacecraft Qualification Unit
2       2010-12-08   15:43:00    F9 v1.0 B0004    CCAFS LC-40    Dragon demo flight C1, two CubeSats...
3       2012-05-22   7:44:00     F9 v1.0 B0005    CCAFS LC-40    Dragon demo flight C2+
4       2012-10-08   0:35:00     F9 v1.0 B0006    CCAFS LC-40    SpaceX CRS-1
5       2013-03-01   15:10:00    F9 v1.0 B0007    CCAFS LC-40    SpaceX CRS-2    
Payload Mass (kg)    Orbit     Customer         Mission Outcome  Landing Outcome
_______________________________________________________________________________________________________
NaN                  LEO       SpaceX           Success          Failure (parachute)
NaN                  LEO (ISS) NASA (COTS) NRO  Success          Failure (parachute)
525                  LEO (ISS) NASA (COTS)      Success          No attempt
500                  LEO (ISS) NASA (CRS)       Success          No attempt
677                  LEO (ISS) NASA (CRS)       Success          No attempt
Comprender la ciencia de datos

Estadística descriptiva

        Flight  Date         Time (UTC)  Booster Version  Launch Site     Payload
_______________________________________________________________________________________________________
count   55     55            55          55               55              55
unique  55     55            53          51               4               55
top     6      2018-03-30    4:45:00     F9 v1.1          CCAFS LC-40     SES-9
freq    1      1             2           5                26              1
        Payload Mass (kg)    Orbit     Customer         Mission Outcome  Landing Outcome
_______________________________________________________________________________________________________
count   53                   55        55               55               55
unique  47                   8         28               2                12
top     9,600                GTO       NASA (CRS)       Success          No attempt
freq    5                    22        14               54               18
Comprender la ciencia de datos

¡Visualiza!

spacex_launch_count

Comprender la ciencia de datos

¡Haz más preguntas!

space-x-launches-by-site

Comprender la ciencia de datos

¡Haz más preguntas!

space-x-launches-by-outcome

Comprender la ciencia de datos

Valores atípicos

spacex-payload-mass-histogram

Comprender la ciencia de datos

¡Practiquemos!

Comprender la ciencia de datos

Preparing Video For Download...