什麼是現代資料架構?

理解現代資料架構

Miller Trujillo

Senior Software Engineer

我們會學到什麼?

  • 現代資料架構
  • 不同資料架構類型
  • 元件
    • 從擷取到服務
    • 資料治理
    • 編排
  • 設計現代資料解決方案
理解現代資料架構

現代資料架構

特性 現代資料架構 傳統資料架構
量與多樣性 巨量資料與多種格式 較小且結構化的資料
儲存 資料湖、NO-SQL、資料倉儲 關聯式資料庫、資料倉儲
處理方式 即時或近即時處理 僅批次處理
延展性與彈性 雲端解決方案 硬體投資
民主化 自助式分析工具 高度仰賴 IT 部門
理解現代資料架構

現代資料架構需求

  • 彈性與可延展性
  • 以雲端平台擴充
  • 因應資料量攀升
  • 關鍵業務流程
    • 計費
  • 整合分散網域
  • 資料治理與資安
1 https://www.ibm.com/resources/the-data-differentiator/data-architecture
理解現代資料架構

元件

  • 資料來源
  • 資料擷取
  • 資料儲存
  • 資料處理
  • 資料編排
  • 資料治理與資安

通用大數據架構:包含資料來源、儲存、批次與串流處理、編排,以及分析儲存與報表

1 https://learn.microsoft.com/en-us/azure/architecture/guide/architecture-styles/big-data
理解現代資料架構

一起來練習吧!

理解現代資料架構

Preparing Video For Download...