Gefeliciteerd

Introductie tot Data Engineering

Vincent Vankrunkelsven

Data Engineer @ DataCamp

Introductie tot data engineering

 

• De taken van een data engineer herkennen
• Welke tools ze gebruiken
• Cloudproviders

Data-engineering gereedschapskist

 

• Databases
• Parallel computing & frameworks (Spark)
• Workflows plannen met Airflow

Extract, Load en Transform (ETL)

 

• Extract: data ophalen uit meerdere bronnen
• Transform: transformeren met parallel computing
• Load: laden in de doeldatabase

Casus: DataCamp

 

• Data ophalen uit meerdere bronnen
• Transformeren tot aanbevelingen
• Laden in de doeldatabase

Goed gedaan!

Introductie tot Data Engineering