Mengapa Anda perlu memantau model

Konsep Monitoring Machine Learning

Hakim Elakhrass

Co-founder and CEO of NannyML

Machine learning di produksi

Proses pengembangan umum

Alur panah berisi empat elemen: mendefinisikan proyek, menyiapkan data, melatih model, dan menerapkannya.

Setelah deployment

Versi terbaru alur pengembangan data science yang menambahkan panah pemantauan setelah tahap deployment. Juga ada panah yang menghubungkan pemantauan dengan tahap menyiapkan data, melatih model, dan deployment untuk iterasi perbaikan berbasis pemantauan kinerja.

Konsep Monitoring Machine Learning

Mengurangi risiko kegagalan

Kasus Zillow

Papan bertuliskan “for sale” di depan rumah.

Alasan model gagal:

  • Masalah perangkat lunak
  • Drift pada data masukan
  • Perubahan relasi antara fitur dan target
Konsep Monitoring Machine Learning

Memaksimalkan dampak bisnis

 

  • Mengoptimalkan model terhadap sasaran bisnis

 

  • Menurunkan biaya cloud

 

Gambar menampilkan piramida dari enam balok kayu. Lapisan dasar membentuk KPI dari tiap huruf. Lapisan lain mewakili pertumbuhan, pencapaian target, dan efisiensi.

Gambar menampilkan logo awan dari sembilan balok kayu.

Konsep Monitoring Machine Learning

Meningkatkan keamanan AI

Tiga isu keamanan:

  • Bias — keluaran adil untuk berbagai kelompok pengguna

 

  • Serangan adversarial — deteksi manipulasi jahat pada data masukan

 

  • Kurang keterjelasan — memahami cara model mengambil keputusan

 

Gambar menunjukkan balok kayu dengan skala yang didorong maju, melambangkan keadilan yang lebih besar dan berkurangnya bias.

Gambar menunjukkan balok kayu dengan gembok yang didorong maju, melambangkan peningkatan keamanan.

Gambar menunjukkan balok kayu yang didorong maju, dengan garis dari siluet kepala yang menandakan peningkatan pemahaman sistem kecerdasan.

Konsep Monitoring Machine Learning

Mengubah dunia dengan data

Proses otomatisasi

Gambar menunjukkan lini produksi otomatis.

Konsep Monitoring Machine Learning

Ayo berlatih!

Konsep Monitoring Machine Learning

Preparing Video For Download...