Bias bei der Datenerhebung mindern

Bias in Daten bewältigen

Konstantinos Kattidis

Data Analytics Lead

Bias in der Datenerhebung erkennen

  • Selection Bias, Historical Bias und Measurement Bias
  • Diese zu verstehen schafft Awareness und hilft Fachleuten, sie proaktiv zu identifizieren und zu handeln

Vergleich zwischen zwei Analysen

  • Sensitivity Analysis prüft, wie Annahmen, Subgruppen oder Gewichtungen die Ergebnisse beeinflussen
  • External Validation vergleicht Daten mit unabhängigen Quellen auf Konsistenz und Genauigkeit
Bias in Daten bewältigen

Zufalls- und geschichtete Stichprobe

Diagramm zu Zufalls- und geschichteter Stichprobe

  • Die passende Stichprobenmethode ist wichtig
  • Random Sampling wählt Personen oder Datenpunkte zufällig aus der Population
  • Stratified Sampling teilt die Population in Untergruppen und zieht daraus Stichproben
Bias in Daten bewältigen

Subgruppen ausgewogen repräsentieren

Diagramm zu Undersampling und Oversampling

  • Oversampling erhöht gezielt die Repräsentation bestimmter Gruppen/Klassen, um die Verteilung zu balancieren
  • Undersampling reduziert überrepräsentierte Gruppen für mehr Balance
  • Weighting weist Beobachtungen je nach Bedeutung Gewichte zu und gleicht Ungleichgewichte aus
Bias in Daten bewältigen

Datenaugmentierung

  • Zur Bekämpfung von Historical Bias wird der Datensatz mit zusätzlichen Punkten angereichert
  • Ziel: unterrepräsentierte Zeiträume oder Ereignisse abdecken
  • Dazu gehören:
    • Lücken füllen
    • Perspektiven diversifizieren
    • Aktualisieren und Fehler korrigieren

Puzzle füllt die Lücken

Bias in Daten bewältigen

Praktiken der Datenmessung

Vier Praktiken zur Datenmessung

  • Standardisierung von Messinstrumenten und Protokollen
  • Schulung und Kalibrierung der Datensammler:innen
  • Pilottests zur Prüfung von Genauigkeit und Konsistenz der Verfahren
  • Regelmäßige Qualitätssicherung und Automatisierung zur weiteren Verbesserung
Bias in Daten bewältigen

Kontinuierliches Monitoring und Anpassung

Dashboard zur Datenüberwachung

  • Kontinuierliches Monitoring und Anpassen sind entscheidend, um neue Bias zu adressieren
  • Regelmäßige Überprüfung von Datenqualitätsmetriken
  • Bias-Bewertungen
  • So lassen sich Verzerrungen sofort erkennen
Bias in Daten bewältigen

Lass uns üben!

Bias in Daten bewältigen

Preparing Video For Download...