Otomatik MLOps mimarisinde feature store

Tam Otomatik MLOps

Arturo Opsetmoen Amador

Senior Consultant - Machine Learning

Machine learning'de feature'lar

$$

Feature Engineering

Ham veri kaynaklarını seç, düzenle ve dönüştür; ML algoritmalarımıza girdi olacak feature'lar oluştur

Bir çalışanın takım elbiseyle, veri sürecini simgeleyen kâğıtlar ve çarkların yanında olduğu görsel.

$$

Örnekler:

  • Sayısal dönüşümler
  • Kategori kodlama
  • Değerleri gruplama
  • Yeni feature'lar üretme
Tam Otomatik MLOps

Kurumsal ortamda feature engineering

$$

Toplu ve akış veri kaynaklarının, tipik bir feature engineering sürecinde veriyi dönüştüren veri bilimcilerce tüketildiğini gösteren mimari görsel.

Tam Otomatik MLOps

Kurumsal ortamda feature engineering

$$

Öncekiyle aynı mimari; ek olarak veri kaynaklarını tüketen başka bir ekip, kendi silosunda feature engineering yapıyor.

Tam Otomatik MLOps

Kurumsal ortamda feature engineering

$$

Öncekinin devamı: Aynı veri kaynaklarını tüketen üçüncü bir ekip daha, kendi silosunda feature engineering yapıyor.

Tam Otomatik MLOps

Feature store

$$

  • Merkezi feature deposu

  • Otomasyonla iş tekrarını önleme

  • Dönüşümlerde standardizasyon

  • Merkezi depolama

  • Batch ve gerçek zamanlı feature sunumu

$$

Veri kaynaklarının bir feature store'a alındığını gösteren mimari. İçeride veri dönüştürülür, oluşturulan feature'lar depolanır ve son olarak feature store bu feature'ları sunar.

Tam Otomatik MLOps

Feature store - Hızlandırılmış deneyler

$$

  • Hızlandırılmış deneyler
    • Deneyler için veri çıkarımları
    • Feature keşfi
    • Aynı feature için çoklu tanımları önler

$$

Bir mimari görsel. Feature store yatayda yer alır ve Deney ve Geliştirme ortamındaki orkestre edilen deneylere feature sağlar.

Tam Otomatik MLOps

Feature store - Continuous training

$$

  • Continuous Training (CT)
    • Üretimde otomatik hatlar için veri çıkarımları

$$

Mimari görsel. Feature store yatayda yer alır. Staging/production ortamlarında continuous training bileşenine veri sağlar.

Tam Otomatik MLOps

Feature store - Çevrimiçi tahminler

$$

  • Çevrimiçi tahminler
    • Tahmin servisleri için önceden tanımlı feature'ları kullan

$$

Mimari görsel. Feature store yatayda yer alır. Sistemdeki tahmin servisine feature sağlar.

Tam Otomatik MLOps

Feature store - Ortam simetrisi

$$

  • Training-serving skew'ü önler

$$

Bir mimari görsel. Feature store yatayda yer alır. Ortamlar genelinde orkestre hatlara, continuous training'e ve tahmin servislerine feature sağlar.

Tam Otomatik MLOps

Hadi pratik yapalım!

Tam Otomatik MLOps

Preparing Video For Download...