Gratulujeme

Introduction to Data Engineering

Vincent Vankrunkelsven

Data Engineer, DataCamp

Úvod do datového inženýrství

 

• Úkoly datového inženýra
• Jaké nástroje používá
• Poskytovatelé cloudových služeb

Nástroje datového inženýra

 

• Databáze
• Paralelní výpočty a frameworky (Spark)
• Plánování workflow s Airflow

Extract, Transform a Load (ETL)

 

• Extract: získání dat z různých zdrojů
• Transform: transformace pomocí paralelních výpočtů
• Load: načtení dat do cílové databáze

Případová studie: DataCamp

 

• Získání dat z více zdrojů
• Transformace na doporučení
• Načtení do cílové databáze

Výborně!

Introduction to Data Engineering