Arsitektur referensi: MLOps sepenuhnya otomatis

MLOps Otomatis Penuh

Arturo Opsetmoen Amador

Senior Consultant - Machine Learning

Apa itu arsitektur referensi?

Arsitektur referensi adalah templat untuk merancang solusi di berbagai domain TI.

Serangkaian dokumen berisi:

Struktur dan integrasi elemen TI
Pola umum pada sistem TI, termasuk sistem ML
Memanfaatkan pengalaman dan praktik terbaik dari pelaku industri

Arsitektur MLOps sepenuhnya otomatis

Gambar menampilkan gambaran tingkat tinggi arsitektur referensi MLOps sepenuhnya otomatis.

¹ https://cloud.google.com/architecture/mlops-continuous-delivery-and-automation-pipelines-in-machine-learning

Arsitektur referensi - Eksperimen terorkestrasi

Gambar menampilkan gambaran tingkat tinggi arsitektur referensi MLOps sepenuhnya otomatis. Gambar men-zoom ke serangkaian kotak terhubung. Dari kiri ke kanan: analisis data, eksperimen terorkestrasi, kode sumber, repositori kode sumber.

Arsitektur referensi - Kode sumber & CI

Gambar bergeser ke kiri. Setelah repositori kode sumber, muncul blok continuous integration dengan kotak build yang menghasilkan paket sebagai keluaran.

Arsitektur referensi - Artifak & CD

Gambar bergeser ke bawah menampilkan kotak continuous delivery.

Arsitektur referensi - Deploy pipeline ML

Gambar bergeser ke kiri menampilkan pipeline ML otomatis dengan langkah: ekstraksi data, validasi data, persiapan data, pelatihan model, evaluasi model, validasi model.

Arsitektur referensi - Metadata store

Gambar bergeser ke bawah memperlihatkan Metadata Store mengumpulkan log yang dihasilkan pipeline ML.

Arsitektur referensi - Model registry

Gambar bergeser ke atas dan kanan menunjukkan model yang dilatih pipeline ML didorong ke model registry.

Arsitektur referensi - Layanan prediksi

Gambar bergeser ke bawah menunjukkan model yang dilatih pipeline ML dikirim terus-menerus ke modul layanan prediksi dalam arsitektur.

Arsitektur referensi - Pemantauan berkelanjutan

Gambar bergeser ke kiri menampilkan komponen pemantauan kinerja yang melacak kinerja prediksi dari layanan prediksi.

Arsitektur referensi - Pemicu otomatis

Gambar bergeser lebih ke kiri menampilkan komponen pemicu yang terhubung ke modul pemantauan kinerja

Arsitektur referensi - Pelatihan ulang otomatis

Gambar bergeser ke atas menunjukkan pemicu dapat mengaktifkan pipeline ML otomatis dalam sistem.