Geautomatiseerde besluitvorming en profilering

De AVG begrijpen

Shalini Kurapati, CIPP/E

Co-founder and CEO, Clearbox AI

AI: Rechtmatigheid, eerlijkheid en transparantie

  • Rechtsgrond
  • Eerlijkheid en discriminatie - gegevens over mensen afleiden
  • Transparantie
  • Bijzondere bepalingen - artikel 22
De AVG begrijpen

Artikel 22

Illustratie van een geautomatiseerd proces

  • Verplichtingen rond eerlijkheid en antidiscriminatie
  • Artikel 22 - geautomatiseerde individuele besluitvorming, inclusief profilering
  • Recht op menselijke tussenkomst en uitleg
1 Beeldbron: flaticon.com
De AVG begrijpen

Profilering

Illustratie van iemands profiel.

  • Gedrag analyseren en voorspellen, grootschalige verwerking, met AI/machine learning
  • Gedrag en eigenschappen herkennen en koppelen
  • Profielen maken en gedrag voorspellen op basis van profielen
  • Voorbeelden:
    • Kans op behandelresultaat
    • Risico op recidive
1 Information Commissioner's Office
De AVG begrijpen

Ethische zorgen bij profilering

Schermafbeeldingen van nieuwssites die bias in AI-algoritmen tonen op basis van gender, ras en prestatiescores.

  • Vooringenomenheid doorgeven of versterken
  • Ontwerp, data, inherente complexiteit/black box
  • Gender- en rassendiscriminatie
1 Beeldbron: bbc.com, propublica.com en techcrunch.com
De AVG begrijpen

Het bekende profileringvoorbeeld

Schermafbeelding van een krantengrafiek over het Cambridge Analytica-schandaal

  • 320.000 gebruikers deden een online persoonlijkheidstest voor 'academisch onderzoek'
  • Verzamelde persoonsgegevens van vrienden van de gebruiker, tot 50 mln gebruikers zonder toestemming
  • Persoonlijkheids/politieke profilering, gerichte advertenties aan wie van mening kan veranderen
  • Gebruikt bij veel verkiezingen in de VS, VK en wereldwijd
1 Beeldbron: The Guardian
De AVG begrijpen

Geautomatiseerde besluitvorming

Illustratie van een geautomatiseerd besluit waarbij de computer de uitkomst bepaalt.

  • Beslissingen via geautomatiseerde middelen zonder menselijke betrokkenheid
  • Met of zonder profilering
  • Elk type data - enquête, locatie, profilering
  • Voorbeeld: geautomatiseerde cv-screening
1 ARTICLE 29 WORKING PARTY Guidelines on Automated individual decision-making and Profiling for the purposes of Regulation 2016/679
De AVG begrijpen

Bankvoorbeeld

Illustratie van een bankmedewerker die aan sommige personen niet kan uitleggen waarom een lening is goedgekeurd of afgewezen.

  • Geautomatiseerde hypotheekbeslissing
  • AI geeft meestal ja/nee-antwoorden; behoefte aan uitleg en menselijke tussenkomst
  • Mechanismen om bias te voorkomen en AI-beslissingen te corrigeren en te verbeteren
De AVG begrijpen

Laten we oefenen!

De AVG begrijpen

Preparing Video For Download...