Паралельні обчислення

Розуміння Data Engineering

Hadrien Lacroix

Content Developer at DataCamp

Паралельні обчислення

• Основа сучасних інструментів обробки даних
• Потрібні:
  • Передусім через пам'ять
  • Також через обчислювальну потужність
• Як це працює:
  • Розбийте завдання на менші підзавдання
  • Розподіліть їх між кількома комп'ютерами

¹ Emojis: Mohamed Hassan

Переваги та ризики паралельних обчислень

• Працівники = обчислювальні блоки
• Переваги
  • Додаткова обчислювальна потужність
  • Менший слід у пам'яті
• Недоліки
  • Переміщення даних має вартість
  • Час на комунікацію

Підсумок

• Переваги та ризики
• Як це реалізовано в Spotflix

Давайте потренуємось!

Розуміння Data Engineering