Výběr zdroje dat

Zodpovědná správa dat v AI

Maria Prokofieva

Lead ML engineer

Proč vybírat?

  • Zajištění kvality dat
  • Právní soulad
  • Spravedlnost

 

Přemýšlivá žena volí mezi dvěma tlačítky a mačká modré

Zodpovědná správa dat v AI

Krok 1. Relevance pro projekt

  • Relevance k cílům projektu
  • Ověření souladu s
    • Tematickou oblastí
    • Rozsahem
    • Očekávanými výsledky

Ikona terče

Zodpovědná správa dat v AI

Krok 2. Integrita zdroje dat

  • Posouzení integrity a důvěryhodnosti
  • Recenze a reference
  • Transparentnost sběru dat
  • Soulad s předpisy a licencování
  • Vysoká kvalita: pravidelné aktualizace

Ikona podání ruky a štítu

Zodpovědná správa dat v AI

Krok 3. Právní soulad

  • Zákonnost dat
  • Právní soulad projektu
  • Právní poradenství:
    • Platné zákony a omezení
    • Anonymizace dat
    • Požadavky na zabezpečení dat
  • Schváleno právním týmem

Zákony

Zodpovědná správa dat v AI

Krok 4. Technická kvalita

  • Strukturální integrita a použitelnost
  • Úplnost
  • Konzistentnost
  • Přesnost
  • Aktuálnost

Certifikát kvality

Zodpovědná správa dat v AI

Krok 5. Zkreslení a reprezentativnost

  • Analýza demografické reprezentace
  • Chráněné charakteristiky
  • Analýza rozložení skupin
  • Metriky spravedlnosti
  • Rozšíření dat
Zodpovědná správa dat v AI

Krok 6. Výběr

  • Zahrnout, pokud:
    • Konzistentně odpovídá požadavkům
    • Lze opravit transformací, rozšířením nebo algoritmy
  • Vyloučit, pokud:
    • Chybí v klíčových oblastech
  • Konzultace s odborníky

Provádění výběru

Zodpovědná správa dat v AI

Projekt městského dopravního toku

Datové zdroje:

  1. Data o počtu vozidel
  2. Zápisy z jednání zastupitelstva
  3. Data GPS sledování
  4. Zmínky o dopravních podmínkách na sociálních sítích
  5. Data z průzkumu cestujících

Projekt městského dopravního toku

1 Images by Streamline HQ
Zodpovědná správa dat v AI

Projekt městského dopravního toku

Vyloučit:

  • Data ze sociálních sítí
  • Data z průzkumu cestujících

Úpravy:

  • Zápisy z jednání zastupitelstva
  • Data o počtu vozidel
    • Doplňující data ze senzorů
  • Data GPS
    • Doplňující data z kamer
Zodpovědná správa dat v AI

Pojďme si procvičit!

Zodpovědná správa dat v AI

Preparing Video For Download...