Zmírňování zaujatosti

Zodpovědná správa dat v AI

Maria Prokofieva

Lead ML engineer

Co probereme

  • Strategie napříč životním cyklem projektu
  • Převzorkování a převáhování
  • Přeznačení a odstranění citlivých atributů
  • Adversariální trénování a rekalibrace modelu
  • Chování uživatelů
  • Omezení spravedlnosti a výběr algoritmu
  • Existují i další strategie
Zodpovědná správa dat v AI

Zaujatost znovu

  • Systematické chyby nebo předsudky
  • Nespravedlivé výsledky pro skupiny nebo jednotlivce

Zaujatost v AI

1 Image by Streamline HQ
Zodpovědná správa dat v AI

Zaujatost v průběhu projektu

  • V surových datech
  • Při předzpracování
  • Při modelování
  • Po nasazení

životní cyklus

Zodpovědná správa dat v AI

Zaujatost při předzpracování

  • Převzorkování
  • Převáhování
  • Přeznačení
  • Odstranění citlivých atributů
Zodpovědná správa dat v AI

Strategie předzpracování

  • Převzorkování:
    • Úprava distribuce pro vyvážené zastoupení tříd
  • Převáhování:
    • Korekce zaujatosti váhami tříd, zachování velikosti datasetu
  • Přeznačení:
    • Aktualizace štítků pro přesné zastoupení cílů
  • Odstranění citlivých atributů:
    • Vyloučení chráněných atributů
Zodpovědná správa dat v AI

Zaujatost při modelování

  • Zaujatost algoritmu
  • Adversariální trénování
  • Omezení spravedlnosti
  • Výběr algoritmu – jednodušší, robustní nebo obecné modely
Zodpovědná správa dat v AI

Finanční poradce

  • Zaujatost způsobená regionálními ekonomickými rozdíly
  • Adversariální trénování pro korekci zaujatosti
  • Rozhodovací stromy a regularizované lineární modely

finanční poradce

1 Image by Streamline HQ
Zodpovědná správa dat v AI

Zaujatost po nasazení a při používání

  • Sledování zaujatosti pro prevenci driftu modelu
  • Rekalibrace modelu
  • Nesprávné použití aplikace

aplikace v provozu

1 Image by Streamline HQ
Zodpovědná správa dat v AI

Finanční poradce

Drift modelu:

  • Nedostatečné zastoupení ekonomiky volné nohy

Nesprávné použití:

  • Aktualizace finančních informací

finanční poradce

1 Image by Streamline HQ
Zodpovědná správa dat v AI

Pojďme si procvičit!

Zodpovědná správa dat v AI

Preparing Video For Download...