什么是现代数据架构？

深入理解现代数据架构

Miller Trujillo

Senior Software Engineer

我们将学习什么？

  • 现代数据架构
  • 各类数据架构
  • 组件
    • 从摄取到服务
    • 数据治理
    • 编排
  • 设计现代数据方案
深入理解现代数据架构

现代数据架构

特性 现代数据架构 传统数据架构
体量与多样性 海量数据，多种格式 体量较小，结构化数据
存储 数据湖、NoSQL、数据仓库 关系型数据库、数据仓库
处理方式 实时或准实时处理 仅批处理
可扩展性与灵活性 基于云的解决方案 硬件投入
民主化 自助式分析工具 对 IT 部门高度依赖
深入理解现代数据架构

现代数据架构的要求

  • 灵活且可扩展
  • 利用云平台弹性扩展
  • 处理激增的数据量
  • 关键业务路径
    • 计费
  • 集成分布式域
  • 数据治理与安全
1 https://www.ibm.com/resources/the-data-differentiator/data-architecture
深入理解现代数据架构

组件

  • 数据源
  • 数据摄取
  • 数据存储
  • 数据处理
  • 数据编排
  • 数据治理与安全

通用大数据架构：包含数据源、存储、批与流处理、编排，以及分析存储与报表

1 https://learn.microsoft.com/en-us/azure/architecture/guide/architecture-styles/big-data
深入理解现代数据架构

让我们来练习！

深入理解现代数据架构

Preparing Video For Download...