Intégration des données

Conception de bases de données

Lis Sulmont

Curriculum Manager

Qu'est-ce que l'intégration des données

L'intégration des données combine des données de différentes sources, formats et technologies pour offrir aux utilisateurs une vue unifiée et interprétée de ces données.

Exemples de cas d'affaires

Vue client à 360°
Acquisition
Systèmes patrimoniaux

Modèle de données unifié

Icône de base de données représentant un modèle de données unifié

Sources de données

Trois sources de données sans lien avec le modèle de données unifié

Format des sources de données

Trois sources de données sans liens avec le modèle unifié et avec des formats différents

Format du modèle de données unifié

Trois sources de données avec des formats différents non connectées au modèle unifié, qui est un entrepôt de données Redshift

Exemple : DataCamp

Trois sources de données avec des formats différents et de services distincts, non connectées au modèle unifié, qui est un entrepôt de données Redshift

Cadence de mise à jour – ventes

Les trois sources de données se mettent à jour quotidiennement

Cadence de mise à jour – trafic aérien

Les trois sources de données se mettent à jour en temps réel

Cadences de mise à jour différentes

Les trois sources de données se mettent à jour à des moments différents

Si simple ?

Les trois sources de données se connectent au modèle de données unifié

Pas vraiment

Les trois sources de données se mettant à jour quotidiennement, avec un grand X dessus

Transformations

Les trois sources de données transformées pour correspondre au modèle de données unifié

Transformation – outils

Traitement des trois sources de données via ETL vers le modèle de données unifié

Choisir un outil d'intégration de données

Flexible
Fiable
Évolutif

Tests automatisés et alertes proactives

Schéma ETL avec des icônes de test à chaque phase

Sécurité

Schéma ETL montrant des portions de données à restreindre de la source à la destination

Sécurité – anonymisation des cartes de crédit

Schéma ETL avec anonymisation des données de carte de crédit

Gouvernance des données – lignage

Schéma ETL avec une ligne représentant le flux de données, de la source à la destination

Passons à la pratique !

Conception de bases de données

Preparing Video For Download...