結語

在 Python 中使用 Dask 進行平行程式設計

James Fulton

Climate Informatics Researcher

重點回顧－第 1 章

• 任務圖
• 延遲評估
• 執行緒 vs. 行程
• dask.delayed()

重點回顧－第 2 章

• 大型結構化資料分析
• Dask arrays
• Dask DataFrames
• 進階資料格式：h5py、zarr、parquet
• pandas、numpy -> dask

重點回顧－第 3 章

• 針對大型非結構化與半結構化資料的 Dask bags
• 例如 JSON、文字、音訊

重點回顧－第 4 章

• 使用 LocalCluster 與其他叢集
• Dask-ML
• 在大數據上訓練 ML
• 以延遲方式前處理大數據

下一步

• 更多函式可用於：
  • Dask arrays
  • Dask DataFrames
  • Dask bags
• 文件：
  • https://docs.dask.org

恭喜完成！

在 Python 中使用 Dask 進行平行程式設計