Architektura platformy

Introduction to Databricks Lakehouse

Gang Wang

Senior Data Scientist

Analogie s hotelem

$$

Řídicí rovina – „Recepce"

recraft: half: A modern hotel front desk with a concierge managing bookings on screens, representing Databricks managing coordination and scheduling

  • Spravuje Databricks
  • Zajišťuje koordinaci a zpracování požadavků

$$

Datová rovina – „Tvůj hotelový pokoj"

recraft: half: A secure private hotel room with a personal safe and workspace desk, representing the customer cloud account where data lives and compute runs

  • Běží ve tvém cloudovém účtu
  • Zde žijí tvá data a výpočty
Introduction to Databricks Lakehouse

Řídicí rovina

$$

  • Spravuje Databricks
  • Uživatelské rozhraní a notebooky
  • Plánování a orchestrace úloh
  • Správa a konfigurace clusterů

$$

recraft: half: A modern reception desk with organized monitors showing dashboards and scheduling boards, representing a control center

Introduction to Databricks Lakehouse

Datová rovina

$$

recraft: half: A secure vault room with server racks and locked storage containers, representing customer-owned cloud infrastructure

$$

  • Běží ve tvém cloudovém účtu
  • Výpočetní clustery běží zde
  • Data uložená v tvém cloudovém úložišti
  • Ty kontroluješ přístup a síťování
Introduction to Databricks Lakehouse

Co je kde?

nanobanana: full: Split diagram with two sections connected by arrows: left side labeled Control Plane showing Workspace UI and Job Scheduler, right side labeled Data Plane showing Clusters and Cloud Storage, arrows flowing between them

Introduction to Databricks Lakehouse

Protokoly auditu a systémové tabulky

$$

  • Protokoly auditu sledují veškerou aktivitu v workspace
  • Uložené v tvém cloudovém účtu jako systémové tabulky
  • Dotazuj se pomocí SQL pro compliance reporting

$$

SELECT user_name, action_name,
       event_time
FROM system.access.audit
WHERE action_name = 'clusterCreate'
ORDER BY event_time DESC
LIMIT 5;
Introduction to Databricks Lakehouse

Shrnutí

$$

  • Řídicí rovina – spravuje Databricks (UI, plánování, správa)
  • Datová rovina – tvůj cloud (výpočty, úložiště, data)
  • Protokoly auditu – uložené jako systémové tabulky v tvém účtu
  • Tvá data nikdy neopustí tvé cloudové prostředí
Introduction to Databricks Lakehouse

Pojďme cvičit!

Introduction to Databricks Lakehouse

Preparing Video For Download...