메타데이터와 데이터 품질

데이터 품질 입문

Chrissy Bloom

Head of Enterprise Data Strategy & Governance

메타데이터란?

메타데이터: 데이터에 대한 데이터, 즉 데이터를 설명하는 속성

  • 데이터세트와 데이터 요소를 구성·이해하는 데 사용
  • 데이터 품질 프로세스에서 다음을 파악하는 데 사용:
    • 필드 정의
    • 필드 소유자
    • 필드의 최종 업데이트 일자

메타데이터 예: 정의, 소유자, 업데이트 일자

데이터 품질 입문

메타데이터 예시

메타데이터는 데이터 사전에서 찾을 수 있습니다.

예:

  • 비즈니스 필드명
  • 비즈니스 정의
  • 데이터 소유자
  • 기술적 물리 필드명

데이터 카탈로그의 메타데이터 예시

데이터 품질 입문

데이터 라인리지란?

데이터 라인리지: 소스에서 입력된 데이터가 파이프라인의 각 단계를 거쳐 소비될 때까지 어떻게 이동하는지 나타낸 것.

데이터 라인리지 예시

  • 각 레이어는 고유한 메타데이터를 가짐
  • 데이터 품질 프로세스에서 데이터 품질 규칙의 적용 지점을 결정하는 데 사용
데이터 품질 입문

데이터 라인리지 예시

데이터 라인리지의 상세 예시

데이터 품질 입문

메타데이터와 데이터 라인리지 예시

데이터 라인리지 예시

데이터 품질 입문

메타데이터와 데이터 라인리지 예시: 안 좋은 사례

데이터 라인리지 예시

데이터 품질 입문

메타데이터와 데이터 라인리지 예시: 모범 사례

데이터 라인리지 예시

데이터 품질 입문

연습해 봅시다!

데이터 품질 입문

Preparing Video For Download...