Val av datakälla

Ansvarsfull AI-datahantering

Maria Prokofieva

Lead ML engineer

Varför välja?

  • Säkerställ datakvalitet
  • Juridisk efterlevnad
  • Rättvisa

 

Förbryllad kvinna som väljer mellan två knappar och trycker på den blå

Ansvarsfull AI-datahantering

Steg 1. Projektrelevans

  • Relevans för projektmålen
  • Kontrollera anpassning till
    • Ämnesområde
    • Omfattning
    • Förväntade resultat

Målikonen

Ansvarsfull AI-datahantering

Steg 2. Datakällans integritet

  • Bedöm integritet och tillförlitlighet
  • Recensioner och omdömen
  • Transparens i datainsamling
  • Efterlevnad och licensiering
  • Hög kvalitet: regelbundna uppdateringar

Handslag och sköldikon

Ansvarsfull AI-datahantering

Steg 3. Juridisk efterlevnad

  • Datas laglighet
  • Juridisk efterlevnad för projektet
  • Juridisk rådgivning:
    • Tillämpliga lagar och restriktioner
    • Dataanonymisering
    • Datasäkerhetskrav
  • Godkänd av juridiskt team

Lagar

Ansvarsfull AI-datahantering

Steg 4. Teknisk kvalitet

  • Strukturell integritet och användbarhet
  • Fullständig
  • Konsekvent
  • Korrekt
  • Aktuell

Kvalitetscertifikat

Ansvarsfull AI-datahantering

Steg 5. Bias och representativitet

  • Analys av demografisk representation
  • Skyddade egenskaper
  • Analysera gruppfördelning
  • Rättvisemått
  • Dataaugmentering
Ansvarsfull AI-datahantering

Steg 6. Urval

  • Inkludera om:
    • Konsekvent anpassad
    • Kan korrigeras med transformation, augmentering eller algoritmer
  • Exkludera om:
    • Brister inom viktiga områden
  • Konsultera domänexperter

Göra ett urval

Ansvarsfull AI-datahantering

Projekt för stadstrafikflöde

Datakällor:

  1. Trafikräkningsdata
  2. Kommunfullmäktigeprotokoll
  3. GPS-spårningsdata
  4. Omnämnanden av trafikförhållanden i sociala medier
  5. Pendlarundersökningsdata

Projekt för stadstrafikflöde

1 Bilder av Streamline HQ
Ansvarsfull AI-datahantering

Projekt för stadstrafikflöde

Exkludera:

  • Data från sociala medier
  • Pendlarundersökningsdata

Ändringar:

  • Kommunfullmäktigeprotokoll
  • Trafikräkningsdata
    • Kompletterande data från sensorer
  • GPS-data
    • Kompletterande data från kameror
Ansvarsfull AI-datahantering

Nu kör vi en övning!

Ansvarsfull AI-datahantering

Preparing Video For Download...