Kvalita dat a jejich příjem

MLOps Concepts

Folkert Stijnman

ML Engineer

Kvalita dat a jejich příjem

Životní cyklus strojového učení – získávání dat

MLOps Concepts

Co je kvalita dat?

  • Kvalita dat měří, jak dobře data slouží svému účelu
  • Hodnocena prostřednictvím různých dimenzí
  • Kvalita modelu ML závisí na datech
MLOps Concepts

Dimenze kvality dat

  • Přesnost
  • Úplnost
  • Konzistentnost
  • Aktuálnost
MLOps Concepts

Příklady dimenzí kvality dat

Dimenze Příklad otázky Příklad kvality dimenze
Přesnost Popisují naše data zákazníka správně? Věk zákazníka v datech je 18, ale ve skutečnosti je 32.
Úplnost Chybí nějaké údaje o zákazníkovi? U 80 % zákazníků nemáme příjmení.
Konzistentnost Je definice zákazníka sjednocena v celé společnosti? Zákazník je v jedné databázi označen jako aktivní, v jiné nikoli.
Aktuálnost Kdy jsou k dispozici data o objednávkách zákazníka? Objednávky jsou synchronizovány na konci dne a nejsou dostupné v reálném čase.

Nízká kvalita dat neznamená konec projektu!

MLOps Concepts

Příjem dat

Datový pipeline

MLOps Concepts

Pojďme si procvičit!

MLOps Concepts

Preparing Video For Download...