Calcul paralel

Înțelegerea ingineriei datelor

Hadrien Lacroix

Content Developer at DataCamp

Calcul paralel

Baza instrumentelor moderne de procesare a datelor
Necesar:
- În principal din cauza memoriei
- Și pentru puterea de procesare
Mod de funcționare:
- Sarcinile sunt împărțite în subtarcini mai mici
- Subtarcinile sunt distribuite pe mai multe calculatoare

1000 de tricouri

asistent de vânzări senior

asistent de vânzări junior

¹ Emoji de Mohamed Hassan

un asistent de vânzări pe rând

gruparea tricourilor

asistenții juniori termină în o oră și cincisprezece minute

asistentul senior termină în două ore și treisprezece minute

Beneficii și riscuri ale calculului paralel

Angajații = unități de procesare
Avantaje
- Putere de procesare suplimentară
- Consum redus de memorie
Dezavantaje
- Transferul datelor implică un cost
- Timp de comunicare

compararea performanței asistenților junior și senior

distribuirea celor o mie de tricouri către cei patru asistenți juniori durează zece minute

adunarea tricourilor de la cei patru asistenți juniori într-o grămadă durează cinci minute

pipeline de date

pipeline de date

Rezumat

Beneficii și riscuri
Implementare la Spotflix

Să exersăm!

Înțelegerea ingineriei datelor

Preparing Video For Download...