Félicitations

Introduction à l'ingénierie des données

Vincent Vankrunkelsven

Data Engineer, DataCamp

Introduction à l'ingénierie des données

 

• Définir les tâches d'un·e ingénieur·e des données
• Les outils qu'ils utilisent
• Les fournisseurs de services infonuagiques

Trousse de l'ingénierie des données

 

• Bases de données
• Calcul parallèle et cadres (Spark)
• Planification de flux de travail avec Airflow

Extraire, transformer et charger (ETL)

 

• Extraire : obtenir des données de plusieurs sources
• Transformer : appliquer des transformations en calcul parallèle
• Charger : charger les données dans la base cible

Étude de cas : DataCamp

 

• Récupérer des données de sources multiples
• Transformer pour générer des recommandations
• Charger dans la base de données cible

Beau travail !

Introduction à l'ingénierie des données