資料剖析

Data Quality 入門

Chrissy Bloom

Head of Enterprise Data Strategy & Governance

什麼是資料剖析?

資料剖析: 對資料集執行統計,以更了解資料與欄位依存關係。

範例:

  • 資料集中有多少筆紀錄?
  • 特定資料欄位的最小值與最大值是多少?
  • 有多少筆紀錄的特定欄位已填入?
  • 當欄位 A 有值時,還有哪些欄位也有值?

資料剖析範例,最小值、最大值、遺漏值計數

Data Quality 入門

資料剖析的重要性

資料剖析:

  • 驗證你已知的事
  • 揭露你未知的事
  • 找出資料品質問題
  • 協助撰寫更好的資料品質規則

手電筒照著資料表

Data Quality 入門

資料剖析長什麼樣?

![資料表]

Data Quality 入門

Customer ID 的資料剖析

資料剖析範例

Data Quality 入門

Customer Name 的資料剖析

資料剖析範例

Data Quality 入門

Customer Birth Data 的資料剖析

資料剖析範例

Data Quality 入門

Customer Account Type 的資料剖析

資料剖析範例

Data Quality 入門

在資料品質中運用資料剖析

資料剖析範例

  • 所有 CustomerID 值都必須為 11 位數字字元。
  • 所有 CustomerFirstName 值都必須為 1–20 個字元的文字字串。
  • 所有 CustomerLastName 值都必須為 1–30 個字元的文字字串。

資料剖析範例

  • 所有 CustomerBirthDate 值都必須為 MM/DD/YYYY 格式,且介於 01/01/1900 與 99/99/9999 之間。
  • 所有 CustomerAccountType 值必須為 Loan、Deposit、Loan and Deposit,或 Credit Card。
Data Quality 入門

一起來練習吧!

Data Quality 入門

Preparing Video For Download...