Lakehouse AI'ye Genel Bakış

Databricks Kavramları

Kevin Barlow

Data Practitioner

Lakehouse AI

Lakehouse Üst Düzey Diyagramı

Neden AI/ML için Lakehouse?

Delta gölünde güvenilir veri ve dosyalar
Yüksek ölçeklenebilir hesaplama
Açık standartlar, kütüphaneler, çerçeveler
Diğer veri ekipleriyle birleşik çalışma

¹ https://www.databricks.com/blog/2020/01/30/what-is-a-data-lakehouse.html

MLOps Yaşam Döngüsü

Makine Öğrenimi Yaşam Döngüsü Diyagramı

Lakehouse'ta MLOps

DataOps

DataOps

Farklı kaynaklardan veri entegrasyonu (AutoLoader)
Veriyi kullanılabilir, temiz forma dönüştürme (Delta Live Tables)
Modeller için yararlı özellikler oluşturma (Feature Store)

Lakehouse'ta MLOps

ModelOps

ModelOps

Farklı modelleri geliştirme ve eğitme (Notebooks)
ML şablonları ve otomasyon (AutoML)
Parametre, metrik ve denemeleri izleme (MLFlow)
Modelleri merkezileştirme ve tüketme (Model Registry)

Lakehouse'ta MLOps

DevOps

DevOps

Modeller için erişim yönetişimi (Unity Catalog)
Model sürümleri için CI/CD (Model Registry)
Tüketim için model dağıtımı (Serving Endpoints)

Gözden geçirelim!

Databricks Kavramları

Preparing Video For Download...