元数据与数据质量

数据质量入门

Chrissy Bloom

Head of Enterprise Data Strategy & Governance

什么是元数据?

元数据: 关于数据的数据,或用于描述数据的属性

  • 用于组织和理解数据集与数据要素
  • 在数据质量过程中用于确定:
    • 字段的定义
    • 字段的负责人
    • 字段的最近更新时间

元数据示例:定义、所有者、更新日期

数据质量入门

元数据示例

可在数据字典中找到元数据。

示例:

  • 业务字段名
  • 业务定义
  • 数据所有者
  • 技术物理字段名

数据目录中的元数据示例

数据质量入门

什么是数据血缘?

数据血缘: 表示数据在管道中的流转:从源头进入,经各处理步骤,直到被消费。

数据血缘示例

  • 每一层都有自己的元数据
  • 在数据质量过程中用于确定应在何处实施数据质量规则
数据质量入门

数据血缘示例

数据血缘的详细示例

数据质量入门

元数据与数据血缘示例

数据血缘示例

数据质量入门

元数据与数据血缘示例:反例

数据血缘示例

数据质量入门

元数据与数据血缘示例:最佳实践

数据血缘示例

数据质量入门

让我们来练习!

数据质量入门

Preparing Video For Download...