Datakällor

Ansvarsfull AI-datahantering

Maria Prokofieva

Lead ML engineer

Det här tar vi upp..

  • Typer av datakällor
  • Begränsningar och val
  • Kombinera flera datakällor

Personer som hämtar dokument från hyllor, använder förstoringsglas och söker i elektronisk databas

Ansvarsfull AI-datahantering

Varför datakällan spelar roll

  • Integritet
  • Mångfald
  • Rättvis representation

datakälla matlagning

1 Bild av Streamline HQ
Ansvarsfull AI-datahantering

Typer efter ursprung

  • Primär

    • Data insamlad inom projektet
    • Regelefterlevnad och samtycke

  • Sekundär

    • Data hämtad från befintliga resurser
    • Licensavtal

Abstrakt koncept för licensavtal

Ansvarsfull AI-datahantering

Typer efter karaktär

  • Kvantitativ

    • Numerisk data

  • Kvalitativ

    • Icke-numerisk

  • Blandad

    • Kombination av numerisk och icke-numerisk

siffror till text

1 Bild av Streamline HQ
Ansvarsfull AI-datahantering

Typer efter tidsegenskaper

  • Statisk
    • Förändras inte över tid
    • Folkräkningsdata
    • Företagsadresser
  • Dynamisk
    • Uppdateras i realtid
    • Sociala medier-strömmar
    • API
    • Finansiella marknadsflöden
    • Sensordata

dynamiska flöden

1 Bild av Streamline HQ
Ansvarsfull AI-datahantering

Mångfald och rättvisa i datakällor

  • Direkta snedvridningar hos datainsamlare
  • Mätbara kontroller av snedvridning
  • Återspeglar inte aktuell verklighet – föråldrade snedvridningar
  • Ärvda snedvridningar från det ursprungliga sammanhanget
  • Nyanserad analys
  • Utvecklas kontinuerligt och kan introducera snedvridningar i realtid
Ansvarsfull AI-datahantering

Projekt för stadstrafikflöde

Datakällor:

  • Historisk trafikdata
  • Protokoll från kommunfullmäktige
  • GPS-spårningsdata

Projekt för stadstrafikflöde

1 Bilder av Streamline HQ
Ansvarsfull AI-datahantering

Historisk trafikdata

  • Stadens trafikavdelning
  • Senaste 5 åren
  • Inkluderar fordonsräkningar och tid på dygnet/veckan

Detta är en primär statisk kvantitativ källa

trafikdata

1 Bild av Streamline HQ
Ansvarsfull AI-datahantering

Protokoll från kommunfullmäktige

  • Offentliga handlingar tillgängliga på kommunens webbplats
  • Sammanfattningar av stadsplanering och trafikstyrning

Detta är en kvalitativ sekundär källa

protokoll

1 Bild av Streamline HQ
Ansvarsfull AI-datahantering

GPS-data

  • Primär dynamisk källa
  • Direkta insikter om aktuella trafikförhållanden, hastigheter och förseningar

GPS

1 Bild av Streamline HQ
Ansvarsfull AI-datahantering

Nu kör vi en övning!

Ansvarsfull AI-datahantering

Preparing Video For Download...