Datapipelines
DevOps-koncept
Cem Sakarya
DevOps Risk Advisor
Datapipelines
ETL
1
https://www.istockphoto.com/nl/vector/data-extract-transform-load-gm1361894912-434102842?phrase=ETL
Batchbearbetning
Flyttar offlinedata i batchar
Batchbearbetning: en stor datamängd hanteras åt gången
Sammanfattning
Data engineering är en central del av infrastrukturhantering
Datapipelines är robusta verktyg för datahantering
Batchbearbetning körs enligt scheman; strömbearbetning sker kontinuerligt
Batchbearbetning lämpar sig för ackumulerade datamängder
Strömbearbetning hanterar realtidsdata
Nu kör vi en övning!
DevOps-koncept
Preparing Video For Download...