Dataflows Gen2 の概要
Microsoft Fabric によるデータ取り込みとセマンティック モデル
Alex Kuntz
Head of Cloud Curriculum, DataCamp
Microsoft Fabric の Dataflows Gen2
Dataflows Gen2 とは？
- データの変換と取り込みのためのツール
主な機能:
- 300 以上の高度な変換に対応（結合、ピボットなど）
- 動的に調整可能な柔軟なスキーマ
- ステージングと Fast Copy で大容量データに対応
- データパイプラインとシームレスに連携
Dataflows Gen2 インターフェースの概要
Dataflows Gen2 は Power Query Online を活用し、直感的に変換できます。
Dataflows Gen2 のインターフェース要素
Power Query リボン - データソース接続と変換の適用
クエリ ウィンドウ: データソースの管理、名前変更、ステージングの有効化
Dataflows Gen2 のインターフェース要素
ダイアグラム ビュー: データソースと変換を可視化
データ プレビュー ウィンドウ: データの確認と操作
Dataflows Gen2 のインターフェース要素
- クエリ設定ウィンドウ: 適用済みステップの確認と変更
Dataflows Gen2 の対応データ出力先
データパイプラインへの Dataflows Gen2 の統合
なぜ統合するか？
変換後データの追加処理とワークフロー自動化のため
- パイプラインのアクティビティとして Dataflows Gen2 を追加
- 変換後データへの追加処理に最適
- パイプライン内での自動化が可能
- パフォーマンスをリアルタイム監視
