Arhitectură de referință: MLOps complet automatizat

MLOps complet automatizat

Arturo Opsetmoen Amador

Senior Consultant - Machine Learning

Ce este o arhitectură de referință?

O arhitectură de referință este un șablon utilizat pentru proiectarea soluțiilor în diferite domenii IT.

Un set de documente cu:

Structuri și integrări ale elementelor IT
Tipare comune în sistemele IT, inclusiv sistemele ML
Valorifică experiența și bunele practici din industrie

Arhitectură MLOps complet automatizată

O imagine cu prezentarea generală a arhitecturii de referință MLOps complet automatizat.

¹ https://cloud.google.com/architecture/mlops-continuous-delivery-and-automation-pipelines-in-machine-learning

Arhitectură de referință - Experimente orchestrate

O imagine cu prezentarea generală a arhitecturii de referință MLOps complet automatizat. Imaginea mărește un set de casete conectate. De la stânga la dreapta: analiză date, experiment orchestrat, cod sursă, repository cod sursă.

Arhitectură de referință - Cod sursă și CI

Imaginea se deplasează la stânga. După repository-ul de cod sursă, este afișat un bloc de integrare continuă. Acest bloc conține o casetă de build care produce pachete ca ieșire.

Arhitectură de referință - Artefacte și CD

Imaginea se deplasează în jos pentru a afișa o casetă de livrare continuă.

Arhitectură de referință - Implementarea pipeline-ului ML

Imaginea se deplasează la stânga pentru a afișa un pipeline ML automatizat cu pași: extragere date, validare date, pregătire date, antrenare model, evaluare model, validare model.

Arhitectură de referință - Metadata store

Imaginea se deplasează în jos pentru a afișa Metadata Store colectând jurnalele generate de pipeline-ul ML.

Arhitectură de referință - Registrul de modele

Imaginea se deplasează în sus și la dreapta pentru a arăta că modelele antrenate de pipeline-ul ML sunt trimise într-un registru de modele.

Arhitectură de referință - Servicii de predicție

Imaginea se deplasează în jos pentru a arăta că modelele antrenate de pipeline-ul ML sunt livrate continuu unui modul de servicii de predicție din arhitectură.

Arhitectură de referință - Monitorizare continuă

Imaginea se deplasează la stânga pentru a afișa o componentă de monitorizare a performanței care urmărește performanța predicțiilor livrate de serviciul de predicție.

Arhitectură de referință - Declanșator automat

Imaginea se deplasează mai mult la stânga pentru a afișa o componentă de declanșare conectată la modulul de monitorizare a performanței.

Arhitectură de referință - Reantrenare automată

Imaginea se deplasează în sus pentru a arăta că declanșatorul poate activa pipeline-ul ML automatizat din sistem.