Ingénierie des données et big data

Présentation de l’ingénierie des données

Hadrien Lacroix

Content Developer at DataCamp

À propos du cours

Cours conceptuel

  • Objectifs
Présentation de l’ingénierie des données

Chapitre 1

Qu’est-ce que l’ingénierie des données ?

  1. Ingénierie des données et big data
  2. Ingénieurs de données vs data scientists
  3. Pipelines de données
Présentation de l’ingénierie des données

Chapitre 2

Comment fonctionne le stockage des données ?

  1. Données structurées vs non structurées
  2. SQL
  3. Entrepôts de données et lacs de données
Présentation de l’ingénierie des données

Chapitre 3

Comment déplacer et traiter les données ?

  1. Traitement des données
  2. Planification des données
  3. Calculs parallèles
  4. Cloud
Présentation de l’ingénierie des données

$$

$$

$$

spotflix logo

Présentation de l’ingénierie des données

Flux de données

première étape - collecte et stockage des données

Présentation de l’ingénierie des données

Flux de données

Deuxième étape - Préparation des données

Présentation de l’ingénierie des données

Flux de données

Troisième étape – exploration et visualisation

Présentation de l’ingénierie des données

Flux de données

expérimentation et prédiction

Présentation de l’ingénierie des données

Ingénieurs de données

la collecte et le stockage des données sont entourés

Présentation de l’ingénierie des données

Ingénieurs de données

Les ingénieurs de données fournissent : les données correctes

Présentation de l’ingénierie des données

Les responsabilités d'un ingénieur en données

Intégrer des données provenant de différentes sources

Présentation de l’ingénierie des données

Ingénieurs de données et big data

Le big data devient la norme =>

Présentation de l’ingénierie des données

Ingénieurs de données et big data

Le big data devient la norme => les ingénieurs de données sont de plus en plus demandés Big data :

Présentation de l’ingénierie des données

Croissance du Big Data

Capteurs et dispositifs

  • Médias sociaux

graph showing big data growth

1 Data Age 2025, Seagate, November 2018
Présentation de l’ingénierie des données

Les cinq V

Volume (combien ?)

Présentation de l’ingénierie des données

Récapitulatif

Ce qui vous attend

Présentation de l’ingénierie des données

Passons à la pratique !

Présentation de l’ingénierie des données

Preparing Video For Download...