Gratulujeme!

Introduction to Databricks Lakehouse

Gang Wang

Senior Data Scientist

Kapitola 1: Paradigma lakehouse

$$

  • Lakehouse spojuje flexibilitu data lake s důvěryhodností datového skladu
  • Medallion architektura organizuje data: bronze → silver → gold
  • Control plane spravuje Databricks; data plane běží ve tvém cloudu

$$

recraft: half: Moderní budova se skleněnou fasádou odrážející strukturu skladu i jezero – symbolizuje lakehouse architekturu

Introduction to Databricks Lakehouse

Kapitola 2: Compute a notebooky

$$

recraft: half: Cluster propojených serverů se svítícími uzly a notebookem v popředí – symbolizuje výpočetní zdroje a interaktivní vývoj

$$

  • All-purpose clustery pro interaktivní práci; jobs clustery pro automatizaci
  • Autoscaling, auto-termination a policies drží náklady pod kontrolou
  • Notebooky podporují více jazyků díky magic commands
  • Databricks Repos přináší plnou Git integraci do workspace
Introduction to Databricks Lakehouse

Kapitola 3: Správa dat a sdílení

$$

  • Unity Catalog zajišťuje centralizovanou správu a automatické sledování lineage
  • Delta Sharing dává externím partnerům přístup k živým datům – bez kopírování
  • Nativní sdílení pro Databricks-to-Databricks; otevřený protokol pro jakoukoliv platformu
  • Lakehouse Federation dotazuje externí databáze bez přesouvání dat

$$

recraft: half: Štít se zámkem uprostřed obklopený datovými toky propojujícími různé budovy – symbolizuje správu dat a bezpečné sdílení

Introduction to Databricks Lakehouse

Kapitola 4: Nasazení

$$

recraft: half: Raketa startující z obrazovky laptopu s deployment pipeline a proudícím kódem – symbolizuje automatizované nasazení do produkce

$$

  • Databricks Asset Bundles nahrazují ruční nasazování přes UI kódem
  • databricks.yml definuje projekt, zdroje a cíle
  • Příkazy CLI: validate, deploy, run, destroy
  • Vše žije v Gitu – reprodukovatelné, auditovatelné, automatizované
Introduction to Databricks Lakehouse

Co dál?

$$

  • Introduction to Databricks SQL – SQL analytika a datové sklady
  • Data Engineering with Databricks – produkční ETL pipeline
  • Databricks Concepts – end-to-end workflows napříč rolemi

$$

recraft: half: Klikatá cesta táhnoucí se do dálky přes barevnou krajinu s ukazateli – symbolizuje cestu dalšího vzdělávání

Introduction to Databricks Lakehouse

Díky!

Introduction to Databricks Lakehouse

Preparing Video For Download...