Introduction aux Dataflows Gen2

Ingestion des données et modèles sémantiques avec Microsoft Fabric

Alex Kuntz

Head of Cloud Curriculum, DataCamp

Dataflows Gen2 dans Microsoft Fabric

  • Qu’est-ce que Dataflows Gen2 ?

    • Outil d’ingestion et de transformation des données

    Dataflows Gen 2

  • Fonctionnalités clés :

    • Plus de 300 transformations avancées (fusion, pivot, etc.)
    • Schéma flexible pour une personnalisation dynamique
    • Staging & Fast Copy : gestion de gros volumes
    • Intégration fluide avec les pipelines de données
Ingestion des données et modèles sémantiques avec Microsoft Fabric

Aperçu de l’interface Dataflows Gen2

Dataflows Gen2 s’appuie sur Power Query Online pour une expérience de transformation intuitive. Interface Dataflow Gen 2

Ingestion des données et modèles sémantiques avec Microsoft Fabric

Composants de l’interface Dataflow Gen2

  • Ruban Power Query - Connecter des sources et appliquer des transformations Ruban Power Query

  • Volet Requêtes : Gérer, renommer et activer le staging pour les sources.

Requêtes

Ingestion des données et modèles sémantiques avec Microsoft Fabric

Composants de l’interface Dataflow Gen2

  • Vue Diagramme : Visualiser sources et transformations Vue Diagramme

  • Volet Aperçu des données : Prévisualiser et interagir avec les données

    Volet Aperçu des données

Ingestion des données et modèles sémantiques avec Microsoft Fabric

Composants de l’interface Dataflow Gen2

  • Volet Paramètres de requête : Suivre et modifier les étapes appliquées

Paramètres de requête

Ingestion des données et modèles sémantiques avec Microsoft Fabric

Destinations prises en charge dans Dataflows Gen2

Dataflows Gen2 permet d’ajouter une destination par requête, offrant une grande souplesse de stockage.

Destinations prises en charge :

  • Bases de données Azure SQL
  • Azure Data Explorer (Kusto)
  • Fabric Lakehouse
  • Fabric Warehouse
  • Base de données Fabric KQL

Destinations prises en charge pour Dataflows Gen2

Ingestion des données et modèles sémantiques avec Microsoft Fabric

Intégrer Dataflows Gen2 aux pipelines de données

Pourquoi intégrer ?
Effectuer d’autres opérations sur les données transformées et automatiser les flux de travail

activité de pipeline dataflow

  • Ajouter Dataflows Gen2 comme activité de pipeline.
  • Idéal pour des opérations supplémentaires sur les données transformées.
  • Automatiser les Dataflows dans le pipeline.
  • Surveiller les performances en temps réel.

Intégration de Dataflows dans un pipeline de données

Ingestion des données et modèles sémantiques avec Microsoft Fabric

Passons à la pratique !

Ingestion des données et modèles sémantiques avec Microsoft Fabric

Preparing Video For Download...