Preventivní pravidla kvality dat

Úvod do kvality dat

Chrissy Bloom

Head of Enterprise Data Strategy & Governance

Definice preventivních pravidel

Preventivní pravidlo kvality dat: pravidlo, které zastaví načítání dat downstream, pokud je zjištěn problém s kvalitou dat

příklad preventivního pravidla kvality dat se třemi tabulkami, kde jsou data načtena pouze v první tabulce

Úvod do kvality dat

Použití preventivních pravidel

  1. Pokud jsou data kritická pro obchodní procesy a zjištěný problém by způsobil škodu, pokud není okamžitě opraven
  2. Pokud lze problém snadno opravit
  3. Pokud má problém dopad na velký počet záznamů

tři obrázky: tep srdce pro kritičnost, puzzle pro složitost a dvě propletené šipky pro dopad

Úvod do kvality dat

Implementace preventivních pravidel

příklad preventivního pravidla kvality dat se dvěma tabulkami, kde se data nenačtou do druhé tabulky

Úvod do kvality dat

Náprava problémů

diagram se dvěma příklady datových pipeline, kde první má zabráněný problém a druhý má problém opravený

Úvod do kvality dat

Detekce vs. prevence

diagram znázorňující rozdíl mezi detektivními a preventivními pravidly kvality dat

Úvod do kvality dat

Pojďme si procvičit!

Úvod do kvality dat

Preparing Video For Download...