자동화된 의사결정과 프로파일링

GDPR 이해하기

Shalini Kurapati, CIPP/E

Co-founder and CEO, Clearbox AI

AI: 적법성, 공정성, 투명성

  • 법적 근거
  • 공정성과 차별 방지 - 개인에 대한 추론
  • 투명성
  • 특별 규정 - 제22조
GDPR 이해하기

제22조

자동화 프로세스 일러스트

  • 공정성과 차별 금지 의무
  • 제22조 - 프로파일링을 포함한 자동화 개별 의사결정
  • 인간 개입 및 설명을 받을 권리
1 Image source: flaticon.com
GDPR 이해하기

프로파일링

사람의 프로필 일러스트

  • AI/머신러닝으로 대규모 데이터 처리, 행동 분석·예측
  • 행동과 속성을 식별·연결
  • 프로필 생성, 프로필 기반 행동 예측
  • 예:
    • 치료 성공 가능성
    • 재범 위험
1 Information Commissioner's Office
GDPR 이해하기

프로파일링의 윤리적 우려

성별·인종·점수에 따른 AI 알고리즘 편향을 보여주는 뉴스 스크린샷

  • 편향을 전파·강화할 수 있음
  • 설계, 데이터, 고유한 복잡성/블랙박스 문제
  • 성별·인종 차별
1 Image source: bbc.com, propublica.com, and techcrunch.com
GDPR 이해하기

유명한 프로파일링 사례

케임브리지 애널리티카 스캔들을 설명하는 신문 그래픽 스크린샷

  • 32만 명이 ‘학술 연구’용 온라인 성격 테스트 참여
  • 이용자 친구의 개인정보 수집, 동의 없이 최대 5천만 명 데이터
  • 성격/정치 성향 프로파일링, 태도 변화를 노린 타깃 광고
  • 미국·영국 등 세계 여러 선거에서 활용
1 Image source: The Guardian
GDPR 이해하기

자동화된 의사결정

컴퓨터가 결과를 결정하는 자동화된 의사결정 일러스트

  • 인간 개입 없이 자동화된 수단으로 내리는 결정
  • 프로파일링이 수반될 수도, 아닐 수도 있음
  • 모든 데이터 유형 포함: 설문, 위치, 프로파일링 등
  • : 이력서 자동 선별
1 ARTICLE 29 WORKING PARTY Guidelines on Automated individual decision-making and Profiling for the purposes of Regulation 2016/679
GDPR 이해하기

은행 사례

일부 개인에게 대출 승인/거절 이유를 설명하지 못하는 은행 직원 일러스트

  • 주택담보대출 자동 심사
  • AI는 보통 예/아니오만 제시 → 설명과 인간 개입 필요
  • 편향 방지, 결정 수정·개선을 위한 장치 마련
GDPR 이해하기

연습해 봅시다!

GDPR 이해하기

Preparing Video For Download...