Các loại thiên lệch dữ liệu

Chinh phục thiên lệch dữ liệu

Konstantinos Kattidis

Data Analytics Lead

Động lực ra quyết định

Người đang quyết định bữa tối và sự nghiệp

Người lớn đưa ra khoảng 35.000 quyết định có ý thức mỗi ngày

"Tôi nên theo đuổi con đường sự nghiệp nào?"

"Tối nay nên ăn gì?"

  • Các quy tắc ngón tay cái (heuristics) giúp não đơn giản hóa xử lý thông tin và quyết định nhanh hơn

  • Nhưng heuristics có thể gây ra... thiên lệch nhận thức

1 https://hbr.org/2023/12/a-simple-way-to-make-better-decisions
Chinh phục thiên lệch dữ liệu

Thiên lệch nhận thức

Các mẫu sai lệch có hệ thống so với chuẩn hoặc tính hợp lý trong phán đoán và ra quyết định

  • Thiên lệch dữ liệu có thể bắt nguồn từ các thiên lệch nhận thức đó

  • Ví dụ: một nhà phân tích vô thức ưu ái dữ liệu tích cực khi phân tích chiến dịch marketing gần đây

Nhà phân tích tập trung vào dữ liệu tích cực

Chinh phục thiên lệch dữ liệu

Thiên lệch hệ thống

  • Nếu thiên lệch nhận thức liên quan đến quyết định cá nhân, thì thiên lệch hệ thống nêu bật các vấn đề rộng hơn định hướng hoạt động liên quan đến dữ liệu
  • Đây là các thiên lệch vốn có trong quy trình, cấu trúc hoặc hệ thống dùng để thu thập, phân tích, và diễn giải dữ liệu
  • Chúng phát sinh do nhiều nguyên nhân như phương pháp thu thập lệch và thiết kế thuật toán

Người phụ nữ suy nghĩ về thiên lệch hệ thống

Chinh phục thiên lệch dữ liệu

Thiên lệch trong vòng đời dữ liệu

Sơ đồ vòng đời dữ liệu và thiên lệch

  • Thiên lệch hệ thống và nhận thức là nguồn gốc của thiên lệch dữ liệu
  • Hiểu các loại thiên lệch dữ liệu là bước đầu để xây dựng phòng vệ vững chắc trước tác động của chúng
Chinh phục thiên lệch dữ liệu

Lộ diện thiên lệch khi thu thập dữ liệu

  • Thiên lệch chọn mẫu
    • Quá trình thu thập ưu ái một số nhóm/đặc điểm hơn các nhóm khác
  • Thiên lệch lịch sử
    • Dữ liệu lịch sử phản ánh bất bình đẳng hoặc vấn đề hệ thống trong quá khứ
  • Thiên lệch đo lường
    • Công cụ hoặc phương pháp luận sai lệch có hệ thống với một số thuộc tính

Sơ đồ thiên lệch trong vòng đời dữ liệu, thu thập dữ liệu

Chinh phục thiên lệch dữ liệu

Lộ diện thiên lệch trong phân tích dữ liệu

  • Thiên lệch nhận thức
    • Thiên lệch xác nhận là một dạng nổi bật
    • Xu hướng tìm và diễn giải thông tin củng cố niềm tin sẵn có
  • Thiên lệch báo cáo
    • Xảy ra khi một số phát hiện được nhấn mạnh hoặc bỏ qua, làm lệch câu chuyện về dữ liệu

Sơ đồ thiên lệch trong vòng đời dữ liệu, phân tích dữ liệu

Chinh phục thiên lệch dữ liệu

Thiên lệch trong phát triển mô hình

  • Thiên lệch thuật toán

    • Xảy ra khi mô hình machine learning phản ánh thiên lệch trong dữ liệu huấn luyện

  • Thiên lệch tự động hóa

    • Nhấn mạnh tầm quan trọng của giám sát con người vì quy trình tự động có thể vô tình duy trì hoặc khuếch đại thiên lệch hiện có

Sơ đồ thiên lệch trong vòng đời dữ liệu, thuật toán

Chinh phục thiên lệch dữ liệu

Ayo berlatih!

Chinh phục thiên lệch dữ liệu

Preparing Video For Download...