Введение в Databricks Lakehouse

Концепции Databricks

Kevin Barlow

Data Analytics Practitioner

Хранилище данных

Хранилище данных

Преимущества

  • Отлично подходит для структурированных данных
  • Высокая производительность
  • Простота поддержания качества данных

Недостатки

  • Высокая стоимость
  • Не поддерживает современные приложения
  • Не предназначено для машинного обучения

Хранилище данных

1 https://www.databricks.com/blog/2021/05/19/evolution-to-the-data-lakehouse.html
Концепции Databricks

Озеро данных

Изображение озера данных

Озеро данных

Преимущества

  • Поддержка всех сценариев использования
  • Высокая гибкость
  • Экономичность

Недостатки

  • Данные могут стать неупорядоченными
  • Исторически невысокая производительность
1 https://www.databricks.com/blog/2021/05/19/evolution-to-the-data-lakehouse.html
Концепции Databricks

Рождение Lakehouse

Хранилище данных и озеро данных

1 https://www.databricks.com/blog/2021/05/19/evolution-to-the-data-lakehouse.html
Концепции Databricks

Рождение Lakehouse

Рождение архитектуры Lakehouse

1 https://www.databricks.com/blog/2021/05/19/evolution-to-the-data-lakehouse.html
Концепции Databricks

Databricks Lakehouse

Платформа Databricks Lakehouse

  • Единая платформа для всех задач с данными
  • Построена на технологиях с открытым исходным кодом
  • Среда для совместной работы
  • Упрощённая архитектура

Высокоуровневая схема Databricks Lakehouse

1 https://www.databricks.com/blog/2021/05/19/evolution-to-the-data-lakehouse.html
Концепции Databricks

Архитектурные преимущества Databricks

Унификация

  • Охватывает все сценарии: от ИИ до BI
  • Сочетает преимущества хранилища и озера данных

Унифицированные аналитические приложения

Мультиоблачность

  • Мощная платформа рядом с вашими данными
  • Нет привязки к конкретному облачному провайдеру

Несколько облаков

Концепции Databricks

Преимущества Databricks для разработки

Совместная работа

  • Для специалистов любого профиля
  • Работа в единой платформе в режиме реального времени

Команда за совместной работой

Открытый исходный код

  • Основана на Apache Spark
  • Поддержка популярных языков: Python, R, Scala, SQL

Открытый исходный код

Концепции Databricks

Давайте потренируемся!

Концепции Databricks

Preparing Video For Download...