Ketersediaan ground truth

Konsep Monitoring Machine Learning

Hakim Elakhrass

Co-founder and CEO of NannyML

Ground truth instan

Gambar taksi terkait prediksi kedatangan taksi.

Mengukur kinerja aktual
Evaluasi mudah
Akurat

Data produksi - instan

Grafik menampilkan kinerja klasifikasi: "reference period" adalah data uji, dan "analysis period" adalah aliran data produksi. Terdapat juga tabel dengan nilai ground truth yang disorot.

Ground truth tertunda

Gambar dompet kosong terkait prediksi gagal bayar pinjaman.

Penundaan tergantung aplikasi
Contoh: prediksi gagal bayar pinjaman
Kinerja belum diketahui sementara itu
Perlu estimasi kinerja

Data produksi - tertunda

Grafik menampilkan kinerja klasifikasi: "reference period" adalah data uji, dan "analysis period" adalah aliran data produksi. Terdapat juga tabel dengan nilai ground truth yang disorot.

Ground truth tidak tersedia

Gambar polis asuransi yang terkait dengan kasus penetapan harga asuransi.

Ada pada proses otomatis penuh
Contoh: penetapan harga asuransi
Kinerja aktual tidak diketahui
Perlu estimasi kinerja

Data produksi - tidak tersedia

Grafik menampilkan kinerja klasifikasi: "reference period" adalah data uji, dan "analysis period" adalah aliran data produksi. Terdapat juga tabel dengan nilai ground truth yang disorot.

Ayo berlatih!

Konsep Monitoring Machine Learning