Хмарні обчислення

Розуміння Data Engineering

Hadrien Lacroix

Content Developer

Хмарні обчислення для обробки даних

Сервери на своїй інфраструктурі

  • Куплені
  • Потрібен простір
  • Витрати на електроенергію й обслуговування
  • Потужність із запасом на піки
  • Простіє потужність у тихі періоди

Сервери в хмарі

  • Орендовані
  • Простір не потрібен
  • Використовуємо лише потрібні ресурси
  • Коли вони потрібні
  • Чим ближче до користувача, тим краще
Розуміння Data Engineering

Хмарні обчислення для зберігання даних

  • Надійність БД: реплікація даних
  • Ризики для чутливих даних
Розуміння Data Engineering

AWS

Розуміння Data Engineering

Microsoft Azure

Розуміння Data Engineering

Google Cloud

Розуміння Data Engineering

файлове сховище

Розуміння Data Engineering

S3

Розуміння Data Engineering

Azure Blob Storage

Розуміння Data Engineering

Google Cloud Storage

Розуміння Data Engineering

обчислення

Розуміння Data Engineering

EC2

Розуміння Data Engineering

Azure Virtual Machines

Розуміння Data Engineering

Google Compute Engine

Розуміння Data Engineering

бази даних

Розуміння Data Engineering

AWS RDS

Розуміння Data Engineering

Azure SQL Database

Розуміння Data Engineering

Gogle Cloud SQL

Розуміння Data Engineering

конвеєр даних

Розуміння Data Engineering

використання AWS S3 для зберігання обкладинок альбомів

Розуміння Data Engineering

використання EC2 для конвертації пісень

Розуміння Data Engineering

використання RDS для зберігання даних про працівників

Розуміння Data Engineering

Мультихмара

Переваги

  • Менша залежність від одного вендора
  • Оптимізація витрат
  • Вимоги місцевих законів щодо фізичного розміщення даних у країні
  • Зменшення наслідків катастроф

Недоліки

  • Хмарні провайдери намагаються «прив'язати» клієнтів
  • Несумісність
  • Безпека та управління
Розуміння Data Engineering

Підсумок

  • Переваги й ризики хмарних обчислень
  • Як це реалізовано в Spotflix
  • Назвете основних хмарних провайдерів і їхні сервіси
Розуміння Data Engineering

Давайте потренуємось!

Розуміння Data Engineering

Preparing Video For Download...