Tebrikler!

Databricks Lakehouse'a Giriş

Gang Wang

Senior Data Scientist

Bölüm 1: Lakehouse Paradigması

$$

  • Lakehouse, göl esnekliğini depo güvenilirliğiyle birleştirir
  • Madalyon mimarisi veriyi düzenler: bronz → gümüş → altın
  • Control plane Databricks tarafından yönetilir; data plane senin bulutunda çalışır

$$

recraft: half: Göl ve depo yaklaşımlarını birleştiren lakehouse mimarisini simgeleyen, cam cephesiyle her ikisini yansıtan modern bir bina

Databricks Lakehouse'a Giriş

Bölüm 2: Compute ve Notebooks

$$

recraft: half: Hesaplama kaynaklarını ve etkileşimli geliştirmeyi simgeleyen, parlayan düğümlü bağlı sunucular kümesi ve önünde açık bir not defteri

$$

  • Etkileşimli iş için all-purpose clusters; otomasyon için jobs clusters
  • Otomatik ölçekleme, otomatik sonlandırma ve ilkeler maliyeti kontrol eder
  • Notebooks, sihirli komutlarla çoklu dili destekler
  • Databricks Repos, çalışma alanına tam Git entegrasyonu getirir
Databricks Lakehouse'a Giriş

Bölüm 3: Yönetişim ve Paylaşım

$$

  • Unity Catalog merkezi yönetişim ve otomatik soy kütüğü (lineage) izleme sağlar
  • Delta Sharing harici ortaklara canlı erişim verir - kopya yok
  • Databricks'ten Databricks'e yerel paylaşım; her platform için açık protokol
  • Lakehouse Federation, veriyi taşımadan harici veritabanlarını sorgular

$$

recraft: half: Yönetişim ve güvenli veri paylaşımını simgeleyen, ortasında kilitli bir kalkan ve farklı binalara bağlanan veri akışları

Databricks Lakehouse'a Giriş

Bölüm 4: Dağıtım

$$

recraft: half: Üretime otomatik dağıtımı simgeleyen, bir dizüstü ekranından fırlayan roket ve yukarı akan dağıtım hatları ile kod

$$

  • Databricks Asset Bundles, elle UI dağıtımını kodla değiştirir
  • databricks.yml projen, kaynaklar ve hedefleri tanımlar
  • CLI komutları: validate, deploy, run, destroy
  • Her şey Git'te yaşar - tekrarlanabilir, denetlenebilir, otomatik
Databricks Lakehouse'a Giriş

Sırada ne var

$$

  • Introduction to Databricks SQL - SQL analitiği ve ambarlama
  • Data Engineering with Databricks - üretim ETL hatları
  • Databricks Concepts - rollere göre uçtan uca iş akışları

$$

recraft: half: Önünde tabelalar olan, renkli bir manzarada uzayıp giden dolambaçlı bir yol; ilerideki öğrenme yolculuğunu simgeliyor

Databricks Lakehouse'a Giriş

Teşekkürler!

Databricks Lakehouse'a Giriş

Preparing Video For Download...