Glückwunsch!

Einführung in das Databricks Lakehouse

Gang Wang

Senior Data Scientist

Kapitel 1: Das Lakehouse-Paradigma

$$

  • Das Lakehouse vereint See-Flexibilität mit Warehouse-Zuverlässigkeit
  • Die Medallion-Architektur ordnet Daten: Bronze → Silber → Gold
  • Die Control Plane wird von Databricks verwaltet; die Data Plane läuft in deiner Cloud

$$

recraft: half: Ein modernes Gebäude mit Glasfassade, in der sich Lagerhaus und See spiegeln – Sinnbild der Lakehouse-Architektur, die zwei Ansätze vereint

Einführung in das Databricks Lakehouse

Kapitel 2: Compute und Notebooks

$$

recraft: half: Ein Verbund vernetzter Server mit leuchtenden Knoten und einem offenen Notebook davor – steht für Rechenressourcen und interaktive Entwicklung

$$

  • All-purpose-Cluster für interaktive Arbeit; Jobs-Cluster für Automatisierung
  • Autoscaling, Auto-Termination und Richtlinien halten Kosten niedrig
  • Notebooks unterstützen mehrere Sprachen mit Magic Commands
  • Databricks Repos bringt volle Git-Integration ins Workspace
Einführung in das Databricks Lakehouse

Kapitel 3: Governance und Sharing

$$

  • Unity Catalog bietet zentrale Governance und automatische Lineage-Verfolgung
  • Delta Sharing gibt externen Partnern Live-Zugriff – keine Kopien
  • Native Freigabe für Databricks-zu-Databricks; offenes Protokoll für jede Plattform
  • Lakehouse Federation fragt externe Datenbanken ab, ohne Daten zu bewegen

$$

recraft: half: Ein Schild mit Schloss in der Mitte, umgeben von fließenden Datenströmen zu verschiedenen Gebäuden – steht für Governance und sicheres Data Sharing

Einführung in das Databricks Lakehouse

Kapitel 4: Deployment

$$

recraft: half: Eine Rakete startet vom Laptopbildschirm, mit Deployment-Pipelines und Code nach oben – steht für automatisierte Produktionseinführung

$$

  • Databricks Asset Bundles ersetzen manuelles UI-Deployment durch Code
  • databricks.yml definiert Projekt, Ressourcen und Targets
  • CLI-Befehle: validate, deploy, run, destroy
  • Alles liegt in Git – reproduzierbar, prüfbar, automatisiert
Einführung in das Databricks Lakehouse

Wie geht es weiter

$$

  • Introduction to Databricks SQL – SQL-Analytics und Warehousing
  • Data Engineering with Databricks – ETL-Pipelines für Produktion
  • Databricks Concepts – End-to-End-Workflows über Personas hinweg

$$

recraft: half: Eine gewundene Straße durch eine farbige Landschaft mit Wegweisern – steht für die Lernreise, die vor dir liegt

Einführung in das Databricks Lakehouse

Danke!

Einführung in das Databricks Lakehouse

Preparing Video For Download...