Pengambilan keputusan otomatis dan pemprofilan

Memahami GDPR

Shalini Kurapati, CIPP/E

Co-founder and CEO, Clearbox AI

AI: Keabsahan, keadilan, dan transparansi

  • Dasar hukum
  • Keadilan dan anti-diskriminasi — inferensi data tentang individu
  • Transparansi
  • Ketentuan khusus — Pasal 22
Memahami GDPR

Pasal 22

Ilustrasi proses otomatis

  • Kewajiban keadilan dan anti-diskriminasi
  • Pasal 22 — pengambilan keputusan individual otomatis, termasuk pemprofilan
  • Hak atas intervensi manusia dan penjelasan
1 Sumber gambar: flaticon.com
Memahami GDPR

Pemprofilan

Ilustrasi profil seseorang.

  • Menganalisis dan memprediksi perilaku, pemrosesan skala besar, menggunakan AI/pembelajaran mesin
  • Mengidentifikasi dan mengaitkan perilaku dan atribut
  • Membuat profil, dan memprediksi perilaku berdasarkan profil
  • Contoh:
    • Keberhasilan perawatan
    • Risiko residivisme
1 Information Commissioner's Office
Memahami GDPR

Isu etika terkait pemprofilan

Cuplikan layar situs berita yang menunjukkan bias algoritma AI terkait gender, ras, dan penilaian kinerja.

  • Menyebarkan atau memperkuat bias
  • Desain, data, kompleksitas bawaan/kotak hitam
  • Diskriminasi gender dan ras
1 Sumber gambar: bbc.com, propublica.com, dan techcrunch.com
Memahami GDPR

Contoh pemprofilan yang terkenal

Tangkapan layar grafik koran yang menjelaskan skandal Cambridge Analytica

  • 320.000 pengguna ikut tes kepribadian online untuk 'riset akademik'
  • Mengumpulkan data teman pengguna, hingga 50 juta data tanpa persetujuan
  • Pemprofilan kepribadian/politik, iklan tertarget pada yang mudah berubah pikiran
  • Dipakai di banyak pemilu di AS, Inggris, dan dunia
1 Sumber gambar: The Guardian
Memahami GDPR

Pengambilan keputusan otomatis

Ilustrasi keputusan otomatis di mana komputer menentukan hasil.

  • Keputusan otomatis tanpa keterlibatan manusia
  • Dapat melibatkan pemprofilan atau tidak
  • Semua jenis data: survei, lokasi, profil
  • Contoh: Penyaringan CV otomatis
1 ARTICLE 29 WORKING PARTY Guidelines on Automated individual decision-making and Profiling for the purposes of Regulation 2016/679
Memahami GDPR

Contoh perbankan

Ilustrasi manajer bank yang tidak bisa menjelaskan alasan persetujuan atau penolakan pinjaman kepada sebagian orang.

  • Keputusan hipotek otomatis
  • Biasanya AI memberi jawaban ya/tidak; perlu penjelasan dan intervensi manusia
  • Mekanisme mencegah bias serta mengoreksi dan meningkatkan keputusan AI
Memahami GDPR

Ayo berlatih!

Memahami GDPR

Preparing Video For Download...