Qu’est-ce que le nettoyage et la préparation des données ?

Préparation des données avec Alteryx

Deanna Sanchez

Alteryx ACE and Owner, Nova Geographica LLC

Pourquoi des données propres sont-elles importantes ?

GIGO : « Garbage In, Garbage Out »

  • Nettoyer et préparer les données permet de :
    • Éviter les fautes et prévenir les erreurs
    • Standardiser les données et les formats
    • Accroître la productivité
    • Accélérer l’obtention d’insights

Représentation d’ordures entrant et sortant d’une base de données

Préparation des données avec Alteryx

Nettoyer vos données, c’est comme…

Faire la révision de votre voiture - Optimiser avec des pièces propres et des fluides neufs améliore les performances.

 

Image d’un mécanicien réglant une voiture

Préparation des données avec Alteryx

Exemples de données sales

  • Données manquantes ou incomplètes

Table de données mettant en évidence des données manquantes comme des cellules vides

Préparation des données avec Alteryx

Exemples de données sales

  • Données manquantes ou incomplètes
  • Données non standardisées ou incohérentes

Table de données mettant en évidence des incohérences, comme des majuscules mélangées à des Capitales de Titres

Préparation des données avec Alteryx

Exemples de données sales

  • Données manquantes ou incomplètes
  • Données non standardisées ou incohérentes
  • Erreurs de saisie

Table de données mettant en évidence des erreurs de saisie comme trop de chiffres

Préparation des données avec Alteryx

Exemples de données sales

  • Données manquantes ou incomplètes
  • Données non standardisées ou incohérentes
  • Erreurs de saisie
  • Espaces en tête/fin, caractères ou ponctuation inutiles

Table de données mettant en évidence une ponctuation inutile comme des signes $ sur des données numériques

Préparation des données avec Alteryx

Techniques de nettoyage des données

Gérer les valeurs manquantes

  • Marquer les données manquantes en imputant des valeurs, par ex. :
    • Convertir les valeurs nulles en vides pour les chaînes
    • Imputer les null à 0 pour les numériques
  • Filtrer les données manquantes du flux

Image d’analystes nettoyant des fichiers de données avec une loupe et un balai

Préparation des données avec Alteryx

Techniques de nettoyage des données

Standardiser les données

  • Assurer le bon format
    • Ajouter $ aux devises
    • 000123456
  • Vérifier les conventions de nommage des champs et fichiers
    • "filename_01012004.csv"
  • Modifier la casse d’un champ
    • LOCATION
  • Modifier les types de données

Image d’un analyste classant des données dans les bons dossiers

Préparation des données avec Alteryx

Techniques de nettoyage des données

Supprimer les éléments inutiles

  • Espaces en tête/fin
  • Tabulations et retours à la ligne
  • Lignes ou colonnes superflues
  • Ponctuation, lettres et chiffres inutiles

Image d’ouvriers du bâtiment nettoyant des fichiers de données

Préparation des données avec Alteryx

Profil avec code couleur

La couleur dans la fenêtre Résultats et le Profil guide l’usage des techniques de nettoyage.

  • Vert = OK

Profil de couleur OK

Préparation des données avec Alteryx

Profil avec code couleur

La couleur dans la fenêtre Résultats et le Profil guide l’usage des techniques de nettoyage.

  • Vert = OK
  • Blanc = Unique

Profils de couleurs OK et Unique

Préparation des données avec Alteryx

Profil avec code couleur

La couleur dans la fenêtre Résultats et le Profil guide l’usage des techniques de nettoyage.

  • Vert = OK
  • Blanc = Unique
  • Jaune = Null

Profils de couleurs OK, Unique et Null

Préparation des données avec Alteryx

Profil avec code couleur

La couleur dans la fenêtre Résultats et le Profil guide l’usage des techniques de nettoyage.

  • Vert = OK
  • Blanc = Unique
  • Jaune = Null
  • Rouge = Pas OK (ex. : espaces finaux)

Profils OK, Unique, Null et Pas OK

Préparation des données avec Alteryx

Profil avec code couleur

La couleur dans la fenêtre Résultats et le Profil guide l’usage des techniques de nettoyage.

  • Vert = OK
  • Blanc = Unique
  • Jaune = Null
  • Rouge = Pas OK (ex. : espaces finaux)
  • Gris = Vide

Tous les profils de couleur

Préparation des données avec Alteryx

Types de données dans Alteryx

Tableau avec le type de données booléen affiché

  • Connaître les différents types de données est essentiel
    • Savoir comment et quand les utiliser
  • Cinq grandes catégories
    • Booléen - formats binaires
Préparation des données avec Alteryx

Types de données dans Alteryx

Tableau avec Booléen et Numérique affichés

  • Connaître les différents types de données est essentiel
    • Savoir comment et quand les utiliser
  • Cinq grandes catégories
    • Booléen - formats binaires
    • Numérique - données numériques, inclut Double
Préparation des données avec Alteryx

Types de données dans Alteryx

Tableau avec Booléen, Numérique et Chaîne affichés

  • Connaître les différents types de données est essentiel
    • Savoir comment et quand les utiliser
  • Cinq grandes catégories
    • Booléen - formats binaires
    • Numérique - données numériques, inclut Double
    • Chaîne - données textuelles
1 String, qui va des types String à V_W String.
Préparation des données avec Alteryx

Types de données dans Alteryx

Tableau avec les quatre types de données : Booléen, Numérique, Chaîne et DateHeure

  • Connaître les différents types de données est essentiel
    • Savoir comment et quand les utiliser
  • Cinq grandes catégories
    • Booléen - formats binaires
    • Numérique - données numériques, inclut Double
    • Chaîne - données textuelles
    • DateHeure - données de dates et d’heures
Préparation des données avec Alteryx

Types de données dans Alteryx

Tableau avec les cinq principaux types de données

  • Connaître les différents types de données est essentiel
    • Savoir comment et quand les utiliser
  • Cinq grandes catégories
    • Booléen - formats binaires
    • Numérique - données numériques, inclut Double
    • Chaîne - données textuelles
    • DateHeure - données de dates et d’heures
    • Spatial - objets et points spatiaux
Préparation des données avec Alteryx

Détails du jeu de données

  • Exercices pratiques Alteryx :
    • Ventes immobilières de New York
    • Un jeu de données pour tous les exercices
    • Analyse des ventes les plus élevées

Image de la skyline de New York

Préparation des données avec Alteryx

Passons à la pratique !

Préparation des données avec Alteryx

Preparing Video For Download...