Sumber data

Manajemen Data AI yang Bertanggung Jawab

Maria Prokofieva

Lead ML engineer

Berikutnya..

  • Jenis sumber data
  • Keterbatasan dan pemilihan
  • Mengintegrasikan banyak sumber data

Orang mengambil dokumen dari rak, memakai kaca pembesar, dan mencari berkas di basis data elektronik

Manajemen Data AI yang Bertanggung Jawab

Mengapa sumber data penting

  • Integritas
  • Keberagaman
  • Representasi adil

memasak sumber data

1 Gambar oleh Streamline HQ
Manajemen Data AI yang Bertanggung Jawab

Jenis berdasarkan asal

  • Primer

    • Data dikumpulkan dalam proyek
    • Kepatuhan dan persetujuan

  • Sekunder

    • Data dari sumber yang sudah ada
    • Perjanjian lisensi

Konsep abstrak kontrak lisensi

Manajemen Data AI yang Bertanggung Jawab

Jenis berdasarkan sifat

  • Kuantitatif

    • Data numerik

  • Kualitatif

    • Non-numerik

  • Campuran

    • Gabungan numerik dan non-numerik

angka ke teks

1 Gambar oleh Streamline HQ
Manajemen Data AI yang Bertanggung Jawab

Jenis berdasarkan temporalitas

  • Statis
    • Tidak berubah seiring waktu
    • Data sensus
    • Alamat perusahaan
  • Dinamis
    • Diperbarui real-time
    • Aliran media sosial
    • API
    • Umpan pasar keuangan
    • Data sensor

aliran dinamis

1 Gambar oleh Streamline HQ
Manajemen Data AI yang Bertanggung Jawab

Keberagaman dan keadilan dalam sumber data

  • Bias langsung pengumpul data
  • Pemeriksaan bias terukur
  • Tidak merefleksikan kondisi kini; bias usang
  • Bias turunan dari konteks asal
  • Analisis bernuansa
  • Terus berkembang; bisa menambah bias real-time
Manajemen Data AI yang Bertanggung Jawab

Proyek arus lalu lintas perkotaan

Sumber data:

  • Data lalu lintas historis
  • Notulen rapat dewan kota
  • Data pelacakan GPS

Proyek arus lalu lintas perkotaan

1 Gambar oleh Streamline HQ
Manajemen Data AI yang Bertanggung Jawab

Data lalu lintas historis

  • Dinas perhubungan kota
  • 5 tahun terakhir
  • Termasuk jumlah kendaraan dan waktu hari/pekan

Ini adalah sumber primer statis kuantitatif

data lalu lintas

1 Gambar oleh Streamline HQ
Manajemen Data AI yang Bertanggung Jawab

Notulen rapat dewan

  • Arsip publik di situs dewan
  • Ringkasan tata kota dan manajemen lalu lintas

Ini adalah sumber sekunder kualitatif

notulen

1 Gambar oleh Streamline HQ
Manajemen Data AI yang Bertanggung Jawab

Data GPS

  • Sumber primer dinamis
  • Wawasan langsung tentang kondisi, kecepatan, dan keterlambatan lalu lintas saat ini

GPS

1 Gambar oleh Streamline HQ
Manajemen Data AI yang Bertanggung Jawab

Ayo berlatih!

Manajemen Data AI yang Bertanggung Jawab

Preparing Video For Download...