마무리

Python에서 Dask로 병렬 프로그래밍

James Fulton

Climate Informatics Researcher

요약 - 1장

  • 태스크 그래프
  • 지연 평가
  • 스레드 vs. 프로세스
  • dask.delayed()

공유 중간 산출물이 있는 태스크 그래프.

Python에서 Dask로 병렬 프로그래밍

요약 - 2장

  • 대규모 구조화 데이터 분석
  • Dask 배열
  • Dask 데이터프레임
  • 고급 데이터 형식: h5py, zarr, parquet
  • pandas & numpy -> dask

여러 청크로 나뉜 배열을 보여줍니다

Python에서 Dask로 병렬 프로그래밍

요약 - 3장

  • 비정형·반정형 대규모 데이터에 Dask 백
  • 예: JSON, 텍스트, 오디오

동영상과 소리를 포함한 데이터셋을 보여주는 다이어그램.

Python에서 Dask로 병렬 프로그래밍

요약 - 4장

  • LocalCluster 및 기타 클러스터 사용
  • Dask-ML
  • 대규모 데이터로 ML 학습
  • 대규모 데이터 지연 전처리
Python에서 Dask로 병렬 프로그래밍

다음 단계

Python에서 Dask로 병렬 프로그래밍

축하합니다!

Python에서 Dask로 병렬 프로그래밍

Preparing Video For Download...