Mentenanța modelului

MLOps Deployment and Life Cycling

Nemanja Radojkovic

Senior Machine Learning Engineer

Anterior...

  • Cum detectăm anomalii și perturbații?

 

Focusul acestei lecții: eșecul modelului ML

MLOps Deployment and Life Cycling

model deteriorat

MLOps Deployment and Life Cycling

îmbunătățirea modelului

MLOps Deployment and Life Cycling

îmbunătățirea setului de date

MLOps Deployment and Life Cycling

centrat pe model

MLOps Deployment and Life Cycling

centrat pe date

1 https://datacentricai.org/
MLOps Deployment and Life Cycling

Calitate înaintea cantității

  • Obțineți mai multe caracteristici relevante
  • Obțineți etichete mai bune

 

Etichetă == Valoarea variabilei țintă din setul de antrenare

Calitatea etichetei == Apropierea etichetei de adevărul real

MLOps Deployment and Life Cycling

etichete slabe

MLOps Deployment and Life Cycling

predicții slabe

MLOps Deployment and Life Cycling

Beneficiile instrumentelor de etichetare

Etichetarea manuală este complexă, lentă și predispusă la erori

Utilizați instrumente de etichetare bune!

  • Etichetare mai eficientă
  • Mai precisă
  • Interfață adaptată scopului
  • "Etichetați mai întâi aceste exemple pentru impact maxim"
  • "Pare că ați făcut o greșeală aici"

instrument de etichetare

Exemplu: Instrument de etichetare imagini, pentru clasificatoare de imagini

MLOps Deployment and Life Cycling

om în buclă

MLOps Deployment and Life Cycling

HIL 2

MLOps Deployment and Life Cycling

aport expert

MLOps Deployment and Life Cycling

MLOps Deployment and Life Cycling

Când sosesc etichetele

  • Rulați pipeline-ul ML => Model nou
  • Verificați dacă noul model este mai bun
    • DA => testați și implementați
    • NU => continuați căutarea,
MLOps Deployment and Life Cycling

Continuați căutarea

  • Încercați modele noi
  • Încercați caracteristici noi
  • Încercați surse de date noi

 

Extrem de util: Metadata store (MLFlow Tracking etc.)

  • Documentați procesul de selecție a modelului
  • Evitați repetarea acelorași experimente

 

În orice caz: MLOps ne ajută să menținem modelul rapid și eficient

MLOps Deployment and Life Cycling

Să exersăm!

MLOps Deployment and Life Cycling

Preparing Video For Download...