总结

Python 中的 Dask 并行编程

James Fulton

Climate Informatics Researcher

回顾 - 第 1 章

• 任务图
• 惰性求值
• 线程 vs. 进程
• dask.delayed()

回顾 - 第 2 章

• 分析大型结构化数据
• Dask 数组
• Dask 数据帧
• 高级数据格式：h5py、zarr、parquet
• pandas 与 numpy -> dask

回顾 - 第 3 章

• Dask 袋（bags）用于大型非结构化与半结构化数据
• 如 JSON、文本、音频

回顾 - 第 4 章

• 使用 LocalCluster 等集群
• Dask-ML
• 大数据上训练机器学习
• 惰性预处理大数据

下一步

• 更多函数适用于：
  • Dask 数组
  • Dask 数据帧
  • Dask 袋（bags）
• 文档：
  • https://docs.dask.org

恭喜！

Python 中的 Dask 并行编程