Qualité des données et ingestion

Concepts d’MLOps

Folkert Stijnman

ML Engineer

Qualité des données et ingestion

Cycle de vie du Machine Learning : acquisition des données

Concepts d’MLOps

Qu'est-ce que la qualité des données ?

  • La qualité des données mesure dans quelle mesure elles servent l'objectif visé
  • Elle s'évalue selon plusieurs dimensions
  • La qualité d'un modèle de Machine Learning dépend des données
Concepts d’MLOps

Dimensions de qualité des données

  • Exactitude
  • Exhaustivité
  • Uniformité
  • Actualité
Concepts d’MLOps

Exemples des dimensions de qualité

Dimension Question à se poser Exemple de qualité de la dimension
Exactitude Nos données décrivent-elles correctement la clientèle ? L'âge indiqué est 18, alors que la personne a en fait 32 ans.
Exhaustivité Manque-t-il des données sur la clientèle ? Pour 80 % des client·e·s, le nom de famille est absent.
Uniformité La définition de la clientèle est-elle harmonisée dans l'entreprise ? Un client est « actif » dans une base, mais « inactif » dans une autre.
Actualité Quand les données de commandes sont-elles disponibles ? Les commandes sont synchronisées en fin de journée, pas en temps réel.

Une faible qualité des données n'achève pas le projet !

Concepts d’MLOps

Ingestion des données

Canal de données

Concepts d’MLOps

Passons à la pratique !

Concepts d’MLOps

Preparing Video For Download...