데이터 분석의 편향 완화

데이터 편향 정복하기

Konstantinos Kattidis

Data Analytics Lead

인지 편향 극복

  • 가정을 적극적으로 의심합니다
  • 데이터의 대안적 해석에 열려 있습니다
  • 자신의 신념을 검토하고, 틀릴 수 있는 근거를 찾습니다
  • 이를 음의 가설 검정이라고 합니다

 

두 가지 가설을 보여주는 도식

데이터 편향 정복하기

보고 편향 대응

윤리적 행동을 상징하는 손과 저울

  • 조직은 투명성, 책무성, 윤리적 행동의 문화를 조성해야 합니다

표준화된 보고 프로토콜

  • 표준화된 보고 프로토콜 도입
  • 편파적이지 않고 포괄적인 데이터 보고를 보장하는 데 도움이 됩니다
데이터 편향 정복하기

의사결정 프로세스

  • 비판적 사고와 다양한 관점을 장려하는 구조적 의사결정 프로세스 도입
    • 동료 검토 수행
    • 분석 방법론에 대한 피드백 수집

동료 검토를 수행하는 두 사람

데이터 편향 정복하기

알고리즘 편향 대응

대표성을 평가하는 사람

  • 알고리즘 개발·배포에서 공정성, 투명성, 책무성을 우선시합니다
  • 학습 데이터의 대표성과 다양성 철저 평가
  • 다양한 인구집단에서 알고리즘 성능 평가
  • 데이터 과학자의 윤리 의식 제고
데이터 편향 정복하기

편향 인지형 알고리즘 설계

  • 신중한 특징 공학
    • 다양한 관점과 속성을 반영하도록 특징을 선택·설계
  • 공정성 제약
    • 공정성 고려를 모델 학습 과정에 직접 반영
    • 예: 성별이나 소득 범주 전반에 유사한 분포를 보장하는 알고리즘

특징 공학과 공정성 제약

데이터 편향 정복하기

알고리즘 편향 드러내기

적대적 학습

  • 적대적 학습
    • 편향을 드러내고 완화하도록 설계된 적대적 예제로 모델을 학습

편향 감사

  • 편향 감사
    • 특화된 기법과 지표(예: 인구통계학적 균형)로 체계적으로 모델의 편향을 평가
데이터 편향 정복하기

설명 가능한 AI 도입

  • 설명 가능한 AI는 편향 완화에 중요합니다
  • 알고리즘이 결정을 내리는 방식을 파악하는 데 도움을 줍니다
  • 데이터 사용자는 잠재적 편향을 더 효과적으로 식별·해결할 수 있습니다

작동 원리를 설명하는 로봇

데이터 편향 정복하기

완화 전략 통합

편향 완화를 상징하는 우산

  • 조직은 이러한 편향을 다루는 전략을 통합한 총체적 접근을 채택해야 합니다
  • 이를 통해 데이터 분석의 무결성, 신뢰성, 공정성을 높일 수 있습니다
데이터 편향 정복하기

연습해 봅시다!

데이터 편향 정복하기

Preparing Video For Download...