Ключові ресурси Databricks SQL

Вступ до Databricks SQL

Kevin Barlow

Data Manager

Корисна аналогія

Дерево складається з багатьох компонентів, разом вони утворюють ціле

GIF із системою дерева

У Databricks SQL різні компоненти поєднуються в рішення для сховища даних

Ресурси Databricks SQL

Вступ до Databricks SQL

Запит

  • Базова «одиниця» аналізу в Databricks SQL
  • Виконує SQL‑код на обчислювальних ресурсах
  • Використовує стандарт ANSI SQL
  • Опрацьовує дані з:
    • Unity Catalog
    • Delta‑таблиць
    • файлів у data lake
    • потоків даних
SELECT
    orderdate AS Date,
    orderpriority AS Priority
    sum(totalprice) AS TotalPrice
FROM sfdc.sales.orders
GROUP BY
    1, 2
ORDER BY
    1, 2
Вступ до Databricks SQL

SQL Warehouse

  • Обчислювальний кластер, призначений для SQL
  • Оптимізації (напр., Photon)
  • Простіше адміністрування
  • Легке масштабування
  • Запити та BI‑інструменти

GIF із SQL Warehouse

Вступ до Databricks SQL

Таблиці проти подань

Таблиці

  • Фізичні втілення наборів даних
  • Записані у форматі Delta
  • Читабельні й доступні поза конвеєром даних
  • Можна оптимізувати розміщення даних (партиціювання тощо)

Таблиця в обʼєктному сховищі

Вступ до Databricks SQL

Таблиці проти подань

Подання

  • Віртуальні подання результатів запитів у Unity Catalog
  • Швидке читання даних
  • Добре спрощують подальші запити
    • Початковий запит має багато JOIN, фільтрів тощо
  • Доступна інкрементна обробка даних

Схема подання

Вступ до Databricks SQL

Візуалізації та дашборди

Візуалізації

  • Графічні подання результату запиту
  • Створюються для одного запиту

Налаштування візуалізацій

Дашборди

  • Набір кількох візуалізацій
  • На основі кількох наборів даних / результатів запитів

Зразок дашборда

Вступ до Databricks SQL

Давайте потренуємось!

Вступ до Databricks SQL

Preparing Video For Download...