Ce este deriva conceptuală?

Monitorizarea conceptelor de Machine Learning

Hakim Elakhrass

Co-founder and CEO of NannyML

Definiție

Modificarea relației dintre intrările modelului și țintă

$P(Y|X)$ se schimbă, $P(X)$ rămâne constant

Imaginea arată modificarea relației dintre venit și vârstă în producție față de mediul de antrenare.

De ce apare deriva?

Evenimente externe
- tendințe virale, modificări de politici
Sezonalitate nemodulată
- în previziunea cererii: Black Friday sau Crăciun
Modificări în procesul de generare a datelor
- actualizare a aplicației de colectare a datelor
Comportament utilizator în evoluție
- obiceiuri, tipare și preferințe în continuă schimbare

Dinamica derivei conceptuale

Derivă bruscă - un nou concept apare într-un interval scurt

Derivă graduală - un nou concept îl înlocuiește treptat pe cel vechi

Recurentă - reapariția unui concept vechi în timp

Imaginea prezintă textul Covid-19.

Imaginea prezintă bancnote americane.

Imaginea prezintă un afiș cu 50% reducere de Black Friday.

Efectele deplasării covariatei asupra derivei conceptuale

Negativă
- efectul derivei conceptuale scade

Pozitivă
- efectul derivei conceptuale se intensifică

Imaginea ilustrează o deplasare a covariatei între fazele de antrenare și producție. Caracteristica venit s-a deplasat de la 80k/an la 100k/an. Al doilea grafic reprezintă deriva conceptuală, indicând o schimbare în relația dintre venit și probabilitatea de nerambursare a creditului. Probabilitatea de nerambursare este mai mare pentru solicitanții cu venituri mai mici.

Imaginea ilustrează o deplasare a covariatei între antrenare și producție. Caracteristica venit s-a deplasat de la 80k/an la 60k/an. Al doilea grafic reprezintă deriva conceptuală, indicând o schimbare în relația dintre venit și probabilitatea de nerambursare a creditului. Probabilitatea de nerambursare este mai mare pentru solicitanții cu venituri mai mici.

Să exersăm!

Monitorizarea conceptelor de Machine Learning