平行運算

Understanding Data Engineering

Hadrien Lacroix

Content Developer at DataCamp

平行運算

• 現代資料處理工具的基礎
• 為何需要：
  • 主要因為記憶體
  • 也為了運算能力
• 運作方式：
  • 將任務拆成較小子任務
  • 把子任務分配到多部電腦

¹ Emojis 由 Mohamed Hassan 製作

平行運算的利弊

• 員工 = 處理單元
• 優點
  • 額外運算能力
  • 降低記憶體占用
• 缺點
  • 移動資料有成本
  • 溝通時間

重點整理

• 利弊
• 在 Spotflix 的實作方式

一起來練習吧！

Understanding Data Engineering