データ統合

データベース設計

Lis Sulmont

Curriculum Manager

データ統合とは?

データ統合は、異なるソース、フォーマット、技術のデータを組み合わせ、ユーザーに統一された一元的なビューを提供する

データベース設計

ビジネスの例

  • 360度の顧客ビュー
  • 買収
  • レガシーシステム
データベース設計

統合データモデル

Database icon representing a unified data model

データベース設計

データソース

Three data sources with no connection to the unified data model

データベース設計

データソースの形式

Three data sources with no connections to the unified data model and with different formats

データベース設計

統一データモデル形式

Three data sources with different formats unconnected to the unified data model which is a Redshift data warehouse

データベース設計

例: DataCamp

Three data sources with different formats and from different departments unconnected to the unified data model which is a Redshift data warehouse

データベース設計

更新頻度 - 売上

The three data sources updating daily

データベース設計

更新頻度 - 航空交通

The three data sources updating in real-time

データベース設計

さまざまな更新頻度

The three data sources updating at different times

データベース設計

簡単にできる?

The three data sources connect to the unified data model

データベース設計

簡単ではない

The three data sources updating daily with a big X over it

データベース設計

変換

The three data sources being transformed to fit the unified data model

データベース設計

変換 - ツール

Processing the three data sources via ETL to the unified data model

データベース設計

データ統合ツールの選択

  • 柔軟さ
  • 信頼性
  • 拡張性
データベース設計

自動テストと事前アラート

ETL diagram with testing icons at each phase

データベース設計

セキュリティ

ETL diagram showing portions of data that should be restricted from its source to destination

データベース設計

セキュリティ - クレジットカードの匿名化

ETL diagram with anonymization of credit card data

データベース設計

データガバナンス - リネージ

ETL diagram with a line representing the flow of data from its source to destination

データベース設計

練習しましょう!

データベース設計

Preparing Video For Download...