Grattis

Introduktion till datatekniker

Vincent Vankrunkelsven

Data Engineer, DataCamp

Introduktion till data engineering

 

• Identifiera en dataingenjörs uppgifter
• Vilka verktyg de använder
• Molntjänstleverantörer

Verktyg för data engineering

 

• Databaser
• Parallell beräkning & ramverk (Spark)
• Arbetsflödesschemaläggning med Airflow

Extract, Transform and Load (ETL)

 

• Extract: hämta data från flera källor
• Transform: utför transformationer med parallell beräkning
• Load: ladda in data i måldatabasen

Fallstudie: DataCamp

 

• Hämta data från flera källor
• Transformera för att skapa rekommendationer
• Ladda in i måldatabasen

Bra jobbat!

Introduktion till datatekniker