数据仓库有哪些层?

数据仓库概念

Aaren Stubberfield

Data Scientist

层级概览——数据源

包含两个数据库图标的图像

数据仓库概念

层级概览——数据暂存

包含两个数据库图标和标注 ETL 的箭头,以及标注 staging 的数据库图标的图像

数据仓库概念

层级概览——数据存储

包含两个数据库图标和标注 ETL 的箭头、标注 staging 的数据库图标,以及标注 data warehouse 与 data mart 的数据库图标的图像

数据仓库概念

层级概览——数据展示

包含两个数据库图标和标注 ETL 的箭头、标注 staging 的数据库图标、标注 data warehouse 与 data mart 的数据库图标、以及人物用电脑、报告与放大镜图标的图像

数据仓库概念

数据源层

  • 数据仓库的所有数据源

  • 数据源示例:

    • 事务型数据库
    • 日志文件
    • 电子表格

数据仓库数据源层示意图

数据仓库概念

数据暂存层

  • 通过 ETL 提取、转换并清洗数据
  • 包含 ETL 流程和存储表

数据仓库暂存层示意图

数据仓库概念

暂存层内的 ETL 流程

  • 已提取
  • 应用业务规则并清洗
  • 常用暂存数据库
  • 必须能提取有效数据
  • 批量/全量加载

数据仓库暂存层示意图

数据仓库概念

数据存储层

  • 数据存于仓库与数据集市
    • 数据仓库 -> 数据集市
    • 数据集市 -> 数据仓库

数据仓库存储层示意图

数据仓库概念

数据展示层

  • 用户与存储数据交互
  • 用户可:
    • 使用 BI(商业智能)工具
    • 使用数据挖掘工具
    • 编写直接查询

人物使用电脑、报告和放大镜图标的图像

数据仓库概念

小结

包含两个数据库图标和标注 ETL 的箭头、标注 staging 的数据库图标、标注 data warehouse 与 data mart 的数据库与两个小数据库图标、以及人物用电脑、报告与放大镜图标的图像

数据仓库概念

Passons à la pratique !

数据仓库概念

Preparing Video For Download...