Ketersediaan ground truth

Konsep Monitoring Machine Learning

Hakim Elakhrass

Co-founder and CEO of NannyML

Ground truth instan

Gambar taksi terkait prediksi kedatangan taksi.

  • Mengukur kinerja aktual

  • Evaluasi mudah

  • Akurat

Konsep Monitoring Machine Learning

Data produksi - instan

Grafik menampilkan kinerja klasifikasi: "reference period" adalah data uji, dan "analysis period" adalah aliran data produksi. Terdapat juga tabel dengan nilai ground truth yang disorot.

Konsep Monitoring Machine Learning

Ground truth tertunda

Gambar dompet kosong terkait prediksi gagal bayar pinjaman.

  • Penundaan tergantung aplikasi
  • Contoh: prediksi gagal bayar pinjaman
  • Kinerja belum diketahui sementara itu
  • Perlu estimasi kinerja
Konsep Monitoring Machine Learning

Data produksi - tertunda

Grafik menampilkan kinerja klasifikasi: "reference period" adalah data uji, dan "analysis period" adalah aliran data produksi. Terdapat juga tabel dengan nilai ground truth yang disorot.

Konsep Monitoring Machine Learning

Ground truth tidak tersedia

Gambar polis asuransi yang terkait dengan kasus penetapan harga asuransi.

  • Ada pada proses otomatis penuh
  • Contoh: penetapan harga asuransi
  • Kinerja aktual tidak diketahui
  • Perlu estimasi kinerja
Konsep Monitoring Machine Learning

Data produksi - tidak tersedia

Grafik menampilkan kinerja klasifikasi: "reference period" adalah data uji, dan "analysis period" adalah aliran data produksi. Terdapat juga tabel dengan nilai ground truth yang disorot.

Konsep Monitoring Machine Learning

Ayo berlatih!

Konsep Monitoring Machine Learning

Preparing Video For Download...