Giảm thiểu thiên lệch trong phân tích dữ liệu

Chinh phục thiên lệch dữ liệu

Konstantinos Kattidis

Data Analytics Lead

Vượt qua thiên kiến nhận thức

• Chủ động thách thức giả định
• Luôn cởi mở với diễn giải khác về dữ liệu
• Xem xét niềm tin của ta và tìm cách chứng minh nó sai
• Cách tiếp cận này gọi là kiểm định giả thuyết phủ định

 

Giải quyết thiên lệch báo cáo

• Tổ chức cần nuôi dưỡng văn hóa minh bạch, trách nhiệm và đạo đức

• Triển khai giao thức báo cáo chuẩn hóa
• Giúp bảo đảm báo cáo dữ liệu khách quan và toàn diện

Quy trình ra quyết định

• Thiết lập quy trình ra quyết định có cấu trúc, khuyến khích tư duy phản biện và đa quan điểm
  • Thực hiện phản biện ngang hàng
  • Xin phản hồi về phương pháp phân tích

Chống thiên lệch trong thuật toán

• Ưu tiên công bằng, minh bạch và trách nhiệm trong phát triển và triển khai thuật toán
• Đánh giá dữ liệu huấn luyện về tính đại diện và đa dạng
• Đánh giá hiệu suất thuật toán trên các nhóm nhân khẩu học đa dạng
• Nâng cao nhận thức đạo đức cho nhà khoa học dữ liệu

Thiết kế thuật toán nhận biết thiên lệch

• Kỹ thuật đặc trưng có chủ đích
  • Chọn và tạo đặc trưng xét nhiều góc nhìn và thuộc tính
• Ràng buộc công bằng
  • Lồng ghép yếu tố công bằng trực tiếp vào quá trình huấn luyện mô hình
  • Ví dụ: thuật toán bảo đảm phân phối tương tự theo giới tính hoặc nhóm thu nhập

Phơi bày thiên lệch thuật toán

• Huấn luyện đối kháng
  • Huấn luyện mô hình với mẫu đối kháng được tạo để bộc lộ và giảm thiên lệch

• Kiểm toán thiên lệch
  • Đánh giá có hệ thống mức thiên lệch bằng kỹ thuật và chỉ số chuyên biệt (ví dụ: demographic parity)

Tích hợp AI có khả năng giải thích

• AI có khả năng giải thích giữ vai trò quan trọng trong giảm thiên lệch
• Giúp hiểu rõ cách thuật toán đưa ra quyết định
• Người dùng dữ liệu nhận diện và xử lý thiên lệch hiệu quả hơn

Tích hợp chiến lược giảm thiểu

• Tổ chức nên áp dụng cách tiếp cận tổng thể, tích hợp các chiến lược xử lý các thiên lệch này
• Nhờ đó tăng tính liêm chính, độ tin cậy và công bằng của phân tích dữ liệu

Ayo berlatih!

Chinh phục thiên lệch dữ liệu