Grattis

Introduktion till datatekniker

Vincent Vankrunkelsven

Data Engineer @ DataCamp

Introduktion till datatekniken

 

• Identifiera en dataingenörs uppgifter
• Vilka verktyg de använder
• Molntjänstleverantörer

Dataingenörens verktygsbox

 

• Databaser
• Parallell databehandling & ramverk (Spark)
• Arbetsflödesschemaläggning med Airflow

Extrahera, läsa in och transformera (ETL)

 

• Extrahera: hämta data från flera källor
• Transformera: utför omvandlingar med parallell databehandling
• Läsa in: ladda data till måldatabasen

Fallstudie: DataCamp

 

• Hämta data från flera källor
• Transformera till rekommendationer
• Läs in i måldatabasen

Bra jobbat!

Introduktion till datatekniker