Batasan sumber data

Manajemen Data AI yang Bertanggung Jawab

Maria Prokofieva

Lead ML Engineer

Sumber data dan batasan umum

  • Kepatuhan hukum
  • Bias
  • Metodologi
  • Peran pengetahuan domain
Manajemen Data AI yang Bertanggung Jawab

Batasan hukum dan akses

  • Penggunaan data terbatas untuk jenis proyek tertentu
  • Kepatuhan tambahan
  • Biaya yang mahal

 

Kepatuhan data

1 Image by Streamline HQ
Manajemen Data AI yang Bertanggung Jawab

Bias dalam sumber data

  • Kesalahan sistematis
  • Persepsi yang terdistorsi
  • Hasil yang tidak merata
  • Merugikan kelompok tertentu
Manajemen Data AI yang Bertanggung Jawab

Jenis-jenis bias

  • Bias historis:
    • Pola dan hasil yang tidak relevan
  • Bias seleksi:
    • Memilih data poin yang disertakan
  • Bias sampling
    • Metode yang digunakan untuk sampling

Skala bias

1 Image by Streamline HQ
Manajemen Data AI yang Bertanggung Jawab

Bias dan batasan berbasis asal

  • Cakupan data terbatas
  • Kendala budaya dan geografis
  • Ruang lingkup dan inklusi terbatas

   

Sekelompok orang

Manajemen Data AI yang Bertanggung Jawab

Bias dan batasan berbasis metodologi

  • Pilihan metode pengumpulan data
  • Pendekatan sampling

Tangan berwarna-warni dengan telapak terbuka, diangkat

Manajemen Data AI yang Bertanggung Jawab

Pengetahuan domain

  • Keterbatasan atau bias tersembunyi
  • Libatkan pakar domain sejak awal
  • Mitigasi keterbatasan sebelum pemodelan
Manajemen Data AI yang Bertanggung Jawab

Proyek arus lalu lintas perkotaan

Sumber data:

  • Data hitung lalu lintas
  • Notulen rapat dewan kota
  • Data pelacakan GPS

Proyek arus lalu lintas perkotaan

1 Images by Streamline HQ
Manajemen Data AI yang Bertanggung Jawab

Proyek arus lalu lintas perkotaan

Data hitung lalu lintas historis:

  • Bias historis
  • Tata kota masa lalu

Data notulen rapat:

  • Bias seleksi
  • Representasi berlebihan dari sebagian anggota komunitas

data lalu lintas

1 Images by Streamline HQ
Manajemen Data AI yang Bertanggung Jawab

Proyek arus lalu lintas perkotaan

Data pelacakan GPS:

  • Bias sampling dan seleksi
  • Mungkin tidak mewakili semua komuter

gps

1 Image by Streamline HQ
Manajemen Data AI yang Bertanggung Jawab

Ayo berlatih!

Manajemen Data AI yang Bertanggung Jawab

Preparing Video For Download...