Начало работы с Databricks

Концепции Databricks

Kevin Barlow

Data Practitioner

Повторение: вычислительные кластеры

Схема облачных вычислений

Концепции Databricks

Создание первого кластера

Первый шаг — создать кластер для обработки данных!

Параметры конфигурации:

Интерфейс кластера

Концепции Databricks

Создание первого кластера

Первый шаг — создать кластер для обработки данных!

Параметры конфигурации:

  • Политики и доступ к кластеру

Интерфейс кластера — доступ

Концепции Databricks

Доступ к кластеру

Схема доступа к кластеру

Концепции Databricks

Создание первого кластера

Первый шаг — создать кластер для обработки данных!

Параметры конфигурации:

  • Политики и доступ к кластеру
  • Databricks Runtime
  • Photon Acceleration

Интерфейс кластера — среда выполнения

Концепции Databricks

Создание первого кластера

Первый шаг — создать кластер для обработки данных!

Параметры конфигурации:

  • Политики и доступ к кластеру
  • Databricks Runtime
  • Photon Acceleration
  • Типы и количество узлов
  • Автомасштабирование / автоотключение

Интерфейс кластера — узлы

Концепции Databricks

Обозреватель данных

Познакомьтесь с обозревателем данных! В этом интерфейсе вы можете:

  1. Просматривать каталоги, схемы и таблицы
  2. Изучать примеры данных и сводную статистику
  3. Просматривать происхождение и историю данных

Также можно загрузить новые данные — нажмите на значок «плюс»!

Исследование данных

1 Photo by Jakub Zerdzicki: https://www.pexels.com/photo/magnifier-loupe-17284804/
Концепции Databricks

Создание ноутбука

Ноутбуки Databricks:

  • Стандартный интерфейс Databricks
  • Улучшенная версия Jupyter с открытым кодом
  • Поддержка множества языков
    • Python, R, Scala, SQL
    • Магические команды (%sql)
  • Встроенные визуализации
  • Комментирование и совместная работа в реальном времени

Создание ноутбука в рабочем пространстве

Концепции Databricks

Давайте потренируемся!

Концепции Databricks

Preparing Video For Download...