Профілі даних

Вступ до якості даних

Chrissy Bloom

Head of Enterprise Data Strategy & Governance

Що таке профілювання даних?

Профілювання даних: обчислення статистик для набору даних, щоб краще зрозуміти дані та залежності між полями

Приклади:

  • Скільки записів у наборі даних?
  • Які мінімальні та максимальні значення для певного елемента даних?
  • Скільки записів мають заповнений певний елемент даних?
  • Коли стовпець A заповнений, які інші стовпці теж заповнені?

приклади профілю даних, min, max, кількість null

Вступ до якості даних

Важливість профілювання даних

Профілювання даних:

  • Підтверджує те, що ви вже знаєте
  • Виявляє те, чого ви не знаєте
  • Визначає проблеми якості даних
  • Допомагає писати кращі правила якості даних

таблиця даних з ліхтариком, що світить на неї

Вступ до якості даних

Як виглядає профіль даних?

![таблиця даних]

Вступ до якості даних

Профіль даних для Customer ID

приклади профілю даних

Вступ до якості даних

Профіль даних для Customer Name

приклади профілю даних

Вступ до якості даних

Профіль даних для Customer Birth Data

приклади профілю даних

Вступ до якості даних

Профіль даних для Customer Account Type

приклади профілю даних

Вступ до якості даних

Використання профілю даних для якості даних

приклади профілю даних

  • Усі значення CustomerID мають містити 11 цифрових символів.
  • Усі значення CustomerFirstName мають бути рядком тексту довжиною 1–20 символів.
  • Усі значення CustomerLastName мають бути рядком тексту довжиною 1–30 символів.

приклади профілю даних

  • Усі значення CustomerBirthDate мають бути у форматі MM/DD/YYYY і між 01/01/1900 та 99/99/9999.
  • Усі значення CustomerAccountType мають бути Loan, Deposit, Loan and Deposit або Credit Card.
Вступ до якості даних

Давайте потренуємось!

Вступ до якості даних

Preparing Video For Download...