以維度制定資料品質規則

Data Quality 入門

Chrissy Bloom

Head of Enterprise Data Strategy & Governance

資料品質規則

資料品質規則： 檢驗資料是否符合商務需求的商務規則類型。

  • 可定義於：
    • 資料集層級
    • 資料元素層級

顯示資料集與資料元素資料品質規則的表格

Data Quality 入門

完整性資料品質規則

資料集層級規則： 來源中所有預期的紀錄都必須載入目標資料表。

顯示完整性資料品質規則的表格

資料元素層級規則： 所有紀錄都必須填有 Customer ID、Customer Name 與 Customer Account Type。

顯示完整性資料品質規則的表格

Data Quality 入門

即時性資料品質規則

資料集層級規則： 客戶資料集中的所有紀錄必須在上午 9:00 前載入。

顯示即時性資料品質規則的表格

資料元素層級規則： 在客戶帳戶狀態首次為「Open」時，所有紀錄都必須已填有 tax ID。

顯示即時性資料品質規則的表格

Data Quality 入門

有效性資料品質規則

資料元素層級規則：

  • 所有紀錄都必須有出生日期，格式為 MM/DD/YYY，且日期需早於今日。
  • 所有紀錄的帳戶狀態必須為 Open、Closed 或 Pending。

顯示有效性資料品質規則的表格

Data Quality 入門

一致性資料品質規則

資料集層級規則： 今日載入的紀錄數必須在昨日載入紀錄數的 ±5% 範圍內。

顯示一致性資料品質規則的表格

資料元素層級規則： AccountTable 中所有 Customer ID 也必須出現在 CustomerTable 中。

顯示一致性資料品質規則的表格

Data Quality 入門

正確性資料品質規則

資料元素層級規則： CustomerTable 中所有紀錄的 Customer Name、Customer Birthdate 與 Customer Address 欄位，與 Tax Form 比對後必須正確。

顯示正確性資料品質規則的表格

用於正確性比對的報稅表

Data Quality 入門

唯一性資料品質規則

資料元素層級規則：

  • 所有紀錄都必須有唯一的 Customer ID。
  • 所有紀錄的客戶名稱、客戶出生日期與客戶地址三者組合必須唯一。

顯示唯一性資料品質規則的表格

Data Quality 入門

一起來練習吧！

Data Quality 入門

Preparing Video For Download...