平台架构

Databricks Lakehouse 入门

Gang Wang

Senior Data Scientist

酒店类比

$$

控制平面 - "前台"

recraft: half: 现代酒店前台，礼宾在屏幕上管理预订，类比 Databricks 负责协调与调度

  • 由 Databricks 托管
  • 处理协同与请求

$$

数据平面 - "您的客房"

recraft: half: 安全私密的酒店客房，配有保险箱与工作台，类比客户云账户中的数据与计算环境

  • 运行于 您的云账户
  • 您的数据与计算所在之处
Databricks Lakehouse 入门

控制平面

$$

  • 由 Databricks 托管
  • Workspace UI 与笔记本
  • 作业调度与编排
  • 集群管理与配置

$$

recraft: half: 现代化接待台，监视器显示仪表板与排程板，类比控制中心

Databricks Lakehouse 入门

数据平面

$$

recraft: half: 安全的金库机房，服务器机架与上锁存储，类比客户自有云基础设施

$$

  • 运行于 您的云账户
  • 计算集群在此运行
  • 数据存放于您的云存储
  • 访问与网络由您掌控
Databricks Lakehouse 入门

各自负责什么？

nanobanana: full: 分隔示意图，左右两栏以箭头相连：左侧为 Control Plane，显示 Workspace UI 与 Job Scheduler；右侧为 Data Plane，显示 Clusters 与 Cloud Storage，箭头在两侧间流动

Databricks Lakehouse 入门

审计日志与系统表

$$

  • 审计日志 跟踪全部工作区活动
  • 以 系统表 存放在您的云账户
  • 用 SQL 查询以满足合规报告

$$

SELECT user_name, action_name,
       event_time
FROM system.access.audit
WHERE action_name = 'clusterCreate'
ORDER BY event_time DESC
LIMIT 5;
Databricks Lakehouse 入门

总结

$$

  • 控制平面——由 Databricks 管理（UI、调度、管理）
  • 数据平面——您的云（计算、存储、数据）
  • 审计日志——以系统表形式存放在您的账户
  • 您的数据 绝不会离开 您的云环境
Databricks Lakehouse 入门

让我们一起练习吧！

Databricks Lakehouse 入门

Preparing Video For Download...