Apa itu pergeseran kovariat?

Konsep Monitoring Machine Learning

Hakim Elakhrass

Co-founder and CEO of NannyML

Definisi

variabel kovariat = fitur input
P(X) berubah
probabilitas bersyarat P(Y|X) tetap sama
perubahan pada distribusi bersama kovariat

Mengapa distribusi probabilitas bersama?

Grafik menunjukkan korelasi positif dan negatif antara fitur satu dan dua. Korelasi positif pada minggu 10 (biru), korelasi negatif pada minggu 16 (merah).

Mengapa pergeseran kovariat terjadi?

Alasan potensial pergeseran kovariat:

Dunia nyata tidak stasioner — pola dan tren berubah
Perubahan sumber data — cara pengumpulan data berbeda antara pengujian dan produksi
Evolusi sistem dan lingkungan

Bagaimana pergeseran kovariat terjadi?

Dinamika perubahan distribusi:

Mendadak

Bertahap

Musiman

Gambar menunjukkan perubahan distribusi yang mendadak: titik biru tiba-tiba berganti menjadi merah setelah beberapa waktu.

Gambar menunjukkan perubahan distribusi bertahap: awalnya titik biru, perlahan menjadi merah lalu kembali biru. Satu titik berubah dulu, lalu seluruh distribusi merah.

Gambar menunjukkan perubahan distribusi musiman: titik biru berubah merah lalu kembali biru, berulang secara periodik.

Bagaimana mendeteksi pergeseran kovariat?

Metode univariat

Distribusi nilai produksi per bulan dari September hingga Maret. Ada tujuh distribusi. September–Desember mirip dengan perubahan kecil (berwarna biru). Januari–Maret menyusut dengan mean turun (berwarna merah karena perubahan lebih besar).

Metode multivariat

Alur deteksi drift multivariat: data multidimensi dikompresi ke ruang laten lalu didekompresi ke bentuk awal dengan error tertentu.

¹ https://app.datacamp.com/learn/courses/dimensionality-reduction-in-python

Ayo berlatih!

Konsep Monitoring Machine Learning