云计算

理解 Data Engineering

Hadrien Lacroix

Content Developer

用于数据处理的云计算

本地机房服务器

  • 购买
  • 需要场地
  • 电力与维护成本
  • 须满足峰值负载
  • 闲时算力闲置

云端服务器

  • 租用
  • 无需场地
  • 按需使用资源
  • 需要时再用
  • 越靠近用户越好
理解 Data Engineering

用于数据存储的云计算

  • 数据库可靠性:数据复制
  • 敏感数据的风险
理解 Data Engineering

AWS

理解 Data Engineering

Microsoft Azure

理解 Data Engineering

Google Cloud

理解 Data Engineering

文件存储

理解 Data Engineering

S3

理解 Data Engineering

Azure Blob 存储

理解 Data Engineering

Google Cloud Storage

理解 Data Engineering

计算

理解 Data Engineering

EC2

理解 Data Engineering

Azure 虚拟机

理解 Data Engineering

Google Compute Engine

理解 Data Engineering

数据库

理解 Data Engineering

AWS RDS

理解 Data Engineering

Azure SQL 数据库

理解 Data Engineering

Gogle Cloud SQL

理解 Data Engineering

数据流水线

理解 Data Engineering

使用 AWS S3 存储专辑封面

理解 Data Engineering

使用 EC2 转换歌曲

理解 Data Engineering

使用 RDS 存储员工数据

理解 Data Engineering

多云

优点

  • 降低对单一厂商的依赖
  • 成本更优
  • 遵守要求数据本地存放的法律
  • 灾难缓解

缺点

  • 供应商锁定
  • 兼容性问题
  • 安全与治理
理解 Data Engineering

总结

  • 云计算的收益与风险
  • 在 Spotflix 的落地方式
  • 能列举主流云厂商及其服务
理解 Data Engineering

Passons à la pratique !

理解 Data Engineering

Preparing Video For Download...