实时流式简介

Streaming 概念

Mike Metzger

Data Engineer

"实时"是什么？

• 定义因情境而异
• 通常指明响应时间窗口
• 将响应时间窗口视为一种保证
• 可能为：
  • 1 天
  • 1 小时
  • 1 分钟

现实示例

邮政服务

• 不同的服务等级
• 送达时效随服务等级而变
• 快速服务的容量有限
• 成本与速度成正比
• 发件人根据选项自行选择

与流式的关系？

实时与流式数据有何关系？

• 流式处理受可用资源的限制
  • 数据能多快被_传输_？
  • …被_处理_？
  • …被_交付_？
  • _成本_多少？

资源决定实现方式

• 帮助界定流式数据流程的需求
• 传输速度
• 处理延迟
• 交付
• 数据存储
• 成本！

开始练习！

Streaming 概念