Пороги якості даних

Вступ до якості даних

Chrissy Bloom

Head of Enterprise Data Strategy & Governance

Пороги сповіщень про якість даних

Поріг сповіщення про якість даних: межа, встановлена виробником або споживачем даних, що запускає дію, коли правило якості даних знаходить більше проблем, ніж дозволяє поріг

задається як кількість або відсоток записів

таблиця з порогами сповіщень, діями та тлумаченнями прикладів порогів

Важливість порогів і сповіщень

таблиця з прикладами результатів якості даних, можливими порогами сповіщень і діями

Визначення порогів

Пороги для сповіщень базуються на критичності, пріоритеті та впливі проблеми якості даних
Для більш критичних полів потрібні суворіші, вищі пороги
Для менш критичних полів пороги можуть бути м'якшими

позитивний лінійний графік, що показує зв'язок між критичністю, пріоритетом, впливом і порогом сповіщення

Рівні порогів сповіщень

Рівень 1 — Попередження: сповіщає про перевищення порога, швидкі дії не потрібні
Рівень 2 — Критичне сповіщення: сповіщає про перевищення порога, потрібна швидка реакція
Рівень 3 — Блокування критичної помилки: сповіщає про перевищення порога та зупиняє подальше завантаження даних у конвеєрі

зображення трьох рівнів порогів сповіщень: жовтий — попередження для найменш критичних, помаранчевий — сповіщення, червоний — блокування для найкритичніших

Приклад сповіщення

таблиця з правилами якості даних, порогами сповіщень, рівнями сповіщень і тлумаченнями

Давайте потренуємось!

Вступ до якості даних