Що таке Snowflake?

Вступ до Snowflake

Danny Hong

Senior Data Engineer

Ваш інструктор

Я — Danny Hong
- Понад 10 років досвіду як інженер з аналітики даних
- Працював у Google, Amazon та Meta
- Експерт із Snowflake для моделей даних і аналізу великих даних

Зображення Danny Hong

Що таке Snowflake? (продовження)

Snowflake — провідна платформа AI Data Cloud і сховища даних
Зазвичай використовують інженери з даних/BI та аналітики
Сховище даних
- Сховище для великих обсягів історичних даних
- Створене для історичного аналізу та звітності за допомогою SQL

Схема аналітичного процесу. Джерельні дані завантажуються у SQL-таблиці в сховищі даних, які можна запитувати для аналізу або побудови звітів/дашбордів.

Чому Snowflake популярний?

Платформа даних як самокерована служба

Не потрібне налаштування апаратури чи ПЗ
Готова до роботи одразу після реєстрації облікового запису

Зображення: новий автомобіль поруч із авто, яке збирають з деталей.

Кілька ключових можливостей Snowflake

Підтримує підключення до провідних хмарних провайдерів
- Приклад: конвеєр даних для застосунку потокового відео
Дозволяє об'єднувати зовнішні джерела даних
Керування даними та доступами
- Примусове дотримання принципу «найменших привілеїв»

Інтерфейс Snowsight

Знімок екрана інтерфейсу Snowsight

Data Marketplace у Snowsight

Архітектура даних Snowflake

Зображення шарів архітектури Snowflake: Cloud Services, Query Processing і Database Storage.

Cloud Services
- Координують дії користувачів
Query Processing
- Використовує архітектуру MPP (масовий паралельний обробник)
- Розподіляє дані та обчислення між кластерами вузлів (комп'ютерів)
Database Storage
- Зберігає дані у колонарному форматі (оптимізовано для аналітичних запитів)

¹ https://docs.snowflake.com/en/user-guide/intro-key-concepts#snowflake-architecture

Давайте потренуємось!

Вступ до Snowflake