Datenquellen

Verantwortungsvolle KI-Datenverwaltung

Maria Prokofieva

Lead ML engineer

Als Nächstes..

  • Arten von Datenquellen
  • Grenzen und Auswahl
  • Mehrere Quellen integrieren

Menschen nehmen Dokumente aus Regalen, nutzen eine Lupe und suchen Dateien in einer elektronischen Datenbank

Verantwortungsvolle KI-Datenverwaltung

Warum Datenquellen wichtig sind

  • Integrität
  • Diversität
  • Faire Repräsentation

Datenquellen kochen

1 Bild von Streamline HQ
Verantwortungsvolle KI-Datenverwaltung

Typen nach Herkunft

  • Primär

    • Im Projekt erhobene Daten
    • Compliance und Einwilligung

  • Sekundär

    • Aus bestehenden Quellen bezogene Daten
    • Lizenzvereinbarungen

Abstraktes Konzept eines Lizenzvertrags

Verantwortungsvolle KI-Datenverwaltung

Typen nach Art

  • Quantitativ

    • Numerische Daten

  • Qualitativ

    • Nicht-numerisch

  • Gemischt

    • Kombination aus numerisch und nicht-numerisch

Zahlen zu Text

1 Bild von Streamline HQ
Verantwortungsvolle KI-Datenverwaltung

Typen nach Zeitlichkeit

  • Statisch
    • Ändert sich nicht über die Zeit
    • Volkszählungsdaten
    • Firmenadressen
  • Dynamisch
    • Aktualisiert in Echtzeit
    • Social-Media-Streams
    • API
    • Finanzmarktdatenfeeds
    • Sensordaten

dynamische Flüsse

1 Bild von Streamline HQ
Verantwortungsvolle KI-Datenverwaltung

Diversität und Fairness in Datenquellen

  • Direkte Voreingenommenheit der Datenerhebenden
  • Messbare Bias-Prüfungen
  • Spiegelt Gegenwart schlecht wider, veraltete Biases
  • Übernommene Biases aus dem Ursprungskontext
  • Nuancierte Analyse
  • Entwickeln sich ständig, evtl. Echtzeit-Biases
Verantwortungsvolle KI-Datenverwaltung

Projekt: urbaner Verkehrsfluss

Datenquellen:

  • Historische Verkehrsdaten
  • Protokolle von Stadtratssitzungen
  • GPS-Tracking-Daten

Projekt: urbaner Verkehrsfluss

1 Bilder von Streamline HQ
Verantwortungsvolle KI-Datenverwaltung

Historische Verkehrsdaten

  • Verkehrsbehörde der Stadt
  • Letzte 5 Jahre
  • Enthält Fahrzeugzählungen und Tages-/Wochenzeiten

Dies ist eine primäre statische quantitative Quelle

Verkehrsdaten

1 Bild von Streamline HQ
Verantwortungsvolle KI-Datenverwaltung

Protokolle von Ratssitzungen

  • Öffentliche Unterlagen auf der Rats-Website
  • Zusammenfassungen zu Stadtplanung und Verkehrssteuerung

Dies ist eine qualitative sekundäre Quelle

Protokolle

1 Bild von Streamline HQ
Verantwortungsvolle KI-Datenverwaltung

GPS-Daten

  • Primäre dynamische Quelle
  • Direkte Einblicke in aktuelle Bedingungen, Geschwindigkeiten und Verzögerungen

GPS

1 Bild von Streamline HQ
Verantwortungsvolle KI-Datenverwaltung

Lass uns üben!

Verantwortungsvolle KI-Datenverwaltung

Preparing Video For Download...