使用维度的数据质量规则

数据质量入门

Chrissy Bloom

Head of Enterprise Data Strategy & Governance

数据质量规则

数据质量规则：一种业务规则类型，用于验证数据是否满足业务要求

• 可定义在：
  • 数据集级别
  • 数据元素级别

完整性数据质量规则

数据集数据质量规则：必须将来源中的所有预期记录加载到目标表中。

数据元素数据质量规则：所有记录必须填写 Customer ID、Customer Name 和 Customer Account Type。

时效性数据质量规则

数据集数据质量规则：客户数据集中的所有记录必须在上午 9:00 前加载完成。

数据元素数据质量规则：在客户账户状态首次为 "Open" 前，必须填写税号。

有效性数据质量规则

数据元素数据质量规则：

• 所有记录必须有出生日期，格式为 MM/DD/YYY，且为过去日期。
• 所有记录的账户状态必须为 Open、Closed 或 Pending。

一致性数据质量规则

数据集数据质量规则：今日加载的记录数必须在昨日记录数的 +/- 5% 范围内。

数据元素数据质量规则：AccountTable 中的所有 Customer ID 必须也出现在 CustomerTable 中。

准确性数据质量规则

数据元素数据质量规则：将 CustomerTable 与税表比对，所有记录的 Customer Name、Customer Birthdate 和 Customer Address 必须准确。

唯一性数据质量规则

数据元素数据质量规则：

• 所有记录必须有唯一的 Customer ID。
• 所有记录的客户姓名、出生日期、地址三者组合必须唯一。

开始练习！

数据质量入门