Облачные вычисления

Введение в дата-инжиниринг

Hadrien Lacroix

Content Developer

Облачные вычисления для обработки данных

Локальные серверы

  • Приобретаются в собственность
  • Требуют физического пространства
  • Расходы на электроэнергию и обслуживание
  • Мощность рассчитана на пиковую нагрузку
  • В периоды затишья ресурсы простаивают

Облачные серверы

  • Арендуются
  • Не требуют физического пространства
  • Используются только нужные ресурсы
  • Именно тогда, когда они нужны
  • Чем ближе к пользователю, тем лучше
Введение в дата-инжиниринг

Облачные вычисления для хранения данных

  • Надёжность баз данных: репликация данных
  • Риски при работе с конфиденциальными данными
Введение в дата-инжиниринг

AWS

Введение в дата-инжиниринг

Microsoft Azure

Введение в дата-инжиниринг

Google Cloud

Введение в дата-инжиниринг

файловое хранилище

Введение в дата-инжиниринг

S3

Введение в дата-инжиниринг

Azure Blob Storage

Введение в дата-инжиниринг

Google Cloud Storage

Введение в дата-инжиниринг

вычисления

Введение в дата-инжиниринг

EC2

Введение в дата-инжиниринг

Azure Virtual Machines

Введение в дата-инжиниринг

Google Compute Engine

Введение в дата-инжиниринг

базы данных

Введение в дата-инжиниринг

AWS RDS

Введение в дата-инжиниринг

Azure SQL Database

Введение в дата-инжиниринг

Google Cloud SQL

Введение в дата-инжиниринг

конвейер данных

Введение в дата-инжиниринг

использование AWS S3 для хранения обложек альбомов

Введение в дата-инжиниринг

использование EC2 для конвертации песен

Введение в дата-инжиниринг

использование RDS для хранения данных сотрудников

Введение в дата-инжиниринг

Мультиоблако

Преимущества

  • Снижение зависимости от одного провайдера
  • Экономия средств
  • Требования законодательства о хранении данных внутри страны
  • Защита от сбоев и катастроф

Недостатки

  • Провайдеры стремятся удержать клиентов
  • Несовместимость систем
  • Безопасность и управление данными
Введение в дата-инжиниринг

Итоги

  • Преимущества и риски облачных вычислений
  • Применение облака в Spotflix
  • Основные облачные провайдеры и их сервисы
Введение в дата-инжиниринг

Давайте потренируемся!

Введение в дата-инжиниринг

Preparing Video For Download...