Администрирование рабочей области Databricks

Концепции Databricks

Kevin Barlow

Data Practitioner

Администратор аккаунта

Основные обязанности:

  • Создание рабочих областей и управление ими
  • Включение Unity Catalog
  • Управление удостоверениями
  • Управление подпиской аккаунта

Снимок экрана консоли аккаунта

Концепции Databricks

Консоль аккаунта

Концепции Databricks

Консоль аккаунта — рабочие области

Концепции Databricks

Консоль аккаунта — данные

Концепции Databricks

Консоль аккаунта — пользователи и группы

Концепции Databricks

Консоль аккаунта — настройки

Концепции Databricks

Администратор рабочей области

Основные обязанности:

  • Управление удостоверениями в рабочей области
  • Создание вычислительных ресурсов и управление ими
  • Управление функциями и настройками рабочей области

Настройки администратора рабочей области

Концепции Databricks

Плоскость данных

Содержит все ресурсы клиента, необходимые для вычислений в Databricks.

  • Данные хранятся в облачной среде клиента
  • Кластеры / SQL Warehouses работают в облачном арендаторе клиента.

Плоскость данных Databricks

Концепции Databricks

Плоскость управления

Часть платформы, которой управляет и которую размещает Databricks.

  • Координирует различные фоновые задачи в Databricks
  • Отправляет запросы в плоскость данных для создания кластеров, запуска заданий и т. д.

Плоскость управления Databricks

Концепции Databricks

Архитектура платформы Databricks

В каждом облаке доступны одинаковые способы создания рабочей области:

  • Маркетплейс поставщика облачных услуг
  • Консоль аккаунта
  • Accounts API Databricks
  • Программное развёртывание (например, Terraform)

Архитектура платформы Databricks

1 https://docs.databricks.com/getting-started/overview.html
Концепции Databricks

Давайте потренируемся!

Концепции Databricks

Preparing Video For Download...