Automatisierte Entscheidungsfindung und Profiling

GDPR verstehen

Shalini Kurapati, CIPP/E

Co-founder and CEO, Clearbox AI

KI: Rechtmäßigkeit, Fairness und Transparenz

  • Rechtsgrundlage
  • Fairness und Diskriminierung – Rückschlüsse auf Personen
  • Transparenz
  • Sonderregelung – Artikel 22
GDPR verstehen

Artikel 22

Illustration eines automatisierten Prozesses

  • Pflichten zu Fairness und Antidiskriminierung
  • Artikel 22 – automatisierte Einzelentscheidungen, inkl. Profiling
  • Recht auf menschliches Eingreifen und Erklärung
1 Bildquelle: flaticon.com
GDPR verstehen

Profiling

Illustration eines persönlichen Profils.

  • Verhalten analysieren und vorhersagen, großskalige Verarbeitung mit KI/Maschinellem Lernen
  • Verhalten und Merkmale identifizieren und verknüpfen
  • Profile erstellen und Verhalten daraus vorhersagen
  • Beispiele:
    • Behandlungserfolg
    • Rückfallrisiko
1 Information Commissioner's Office
GDPR verstehen

Ethische Bedenken beim Profiling

Screenshots von Nachrichtenwebsites zu KI-Bias nach Geschlecht, Ethnie und Leistungsscores.

  • Vorurteile fortschreiben oder verstärken
  • Design, Daten, inhärente Komplexität/Black Box
  • Diskriminierung nach Geschlecht und Ethnie
1 Bildquelle: bbc.com, propublica.com und techcrunch.com
GDPR verstehen

Das berühmte Profiling-Beispiel

Screenshot einer Zeitungs-Grafik zum Cambridge-Analytica-Skandal

  • 320.000 Nutzer machten einen Online-Persönlichkeitstest für „akademische Forschung"
  • Erhob auch die Daten der Freunde, bis zu 50 Mio. Datensätze ohne Einwilligung
  • Persönlichkeits-/politisches Profiling, gezielte Werbung an Wankelmütige
  • In vielen Wahlen in den USA, UK und weltweit eingesetzt
1 Bildquelle: The Guardian
GDPR verstehen

Automatisierte Entscheidungsfindung

Illustration einer automatisierten Entscheidung, bei der der Computer das Ergebnis festlegt.

  • Entscheidungen vollautomatisch ohne menschliches Zutun
  • Kann mit oder ohne Profiling erfolgen
  • Beliebige Datenarten – Umfragen, Standort, Profile
  • Beispiel: Automatisches CV-Screening
1 ARTICLE 29 WORKING PARTY Leitlinien zu automatisierten Einzelentscheidungen und Profiling für Zwecke der Verordnung 2016/679
GDPR verstehen

Bankbeispiel

Illustration eines Bankmanagers, der einigen Personen nicht erklären kann, warum ein Kredit genehmigt oder abgelehnt wurde.

  • Automatisierte Hypothekenentscheidung
  • KI liefert meist Ja/Nein-Antworten – Bedarf an Erklärungen und menschlichem Eingreifen
  • Mechanismen gegen Bias sowie zum Korrigieren und Verbessern von KI-Entscheidungen
GDPR verstehen

Lass uns üben!

GDPR verstehen

Preparing Video For Download...