Datový audit

Zodpovědná správa dat v AI

Maria Prokofieva

Lead ML engineer

Co probereme

• Datový audit
• Validace dat
• Strategie zmírnění zkreslení

Datový audit

• Úplná kontrola dat v průběhu životního cyklu projektu

• Ověření technického stavu a souladu s odpovědným přístupem

• Prováděno po zásadní změně projektu

• Aktualizovaná dokumentace pro audit

Provádění datových auditů

• Prováděno pravidelně
• Zamezení neúmyslnému zavádění chyb
• Ochrana před komplikacemi a šířením chyb
• Zachování transparentnosti a odpovědnosti
• Budování důvěry

AI finanční poradce

• Profil chování a cíle plánu
• Vývoj strategie
• Přiřazení cílů k investičním produktům
• Vytvoření investičního portfolia

Zdroje dat:

• Uživatelská data z chatu a nahrávek
• Externí data v reálném čase a historická data (Bloomberg)

¹ Image by Streamline HQ

Zdroje dat projektu

• Data poskytnutá uživatelem
• Externí data z API

¹ Image by Streamline HQ

Nastavení datového auditu

Použijte plán správy dat:

• Podrobnosti o datech
• Frekvence auditu
• Požadované testy
• Přiřazení členové týmu

¹ Image by Streamline HQ

Harmonogram datových auditů

• Úvodní průzkum dat
• Pravidelné audity při předzpracování a modelování
• Při jakýchkoli zásadních změnách dat

¹ Image by Streamline HQ

Průběžné datové audity

• Pravidelné průběžné monitorování
• Kvalita a soulad dat
• Výkonnost modelu a metriky férovosti
• Využití a ukládání dat
• Bezpečnost a škálovatelnost

Posun modelu

• Model může být časem méně přesný
• Společenské změny, tržní podmínky nebo základní proměnné
• Detekce posunu modelu protokolováním predikcí a hodnocením metrik
• Upozornění při překročení prahové hodnoty
• Náprava pomocí nových dat nebo přetrénování modelu

Datové audity pro AI finančního poradce

• Úvodní průzkum dat
• Předzpracování s transformacemi a čištěním
• Modelování s hodnocením férovosti
• Audit před nasazením
• Průběžné monitorování

¹ Image by Streamline HQ

Pojďme si procvičit!

Zodpovědná správa dat v AI