Données manquantes et valeurs aberrantes

S'exercer aux questions d'entrevue en statistiques avec Python

Conor Dewey

Data Scientist, Squarespace

Traiter les données manquantes

  • Supprimer toute la ligne
  • Imputer les valeurs manquantes
S'exercer aux questions d'entrevue en statistiques avec Python

Supprimer toute la ligne

df.dropna(inplace=True)

 

S'exercer aux questions d'entrevue en statistiques avec Python

Imputer les valeurs manquantes

  • Valeur constante
  • Enregistrement choisi au hasard
  • Moyenne, médiane ou mode
  • Valeur estimée par un autre modèle
S'exercer aux questions d'entrevue en statistiques avec Python

Quelques fonctions utiles

  • isnull()
  • dropna()
  • fillna()
S'exercer aux questions d'entrevue en statistiques avec Python

Gérer les valeurs aberrantes

  • Écarts types
  • Étendue interquartile (IQR)
S'exercer aux questions d'entrevue en statistiques avec Python

Écarts types

 

Courbe gaussienne

1 Wikimedia
S'exercer aux questions d'entrevue en statistiques avec Python

Étendue interquartile (IQR)

  IQR illustrée

1 Wikimedia
S'exercer aux questions d'entrevue en statistiques avec Python

Résumé

  • Supprimer toute la ligne
  • Imputer les valeurs manquantes
  • Écarts types
  • Étendue interquartile
S'exercer aux questions d'entrevue en statistiques avec Python

Préparons-nous à l'entrevue !

S'exercer aux questions d'entrevue en statistiques avec Python

Preparing Video For Download...