Complimenti

Introduzione al Data Engineering

Vincent Vankrunkelsven

Data Engineer, DataCamp

Introduzione al data engineering

 

• Individuare le attività di un data engineer
• Quali strumenti usa
• Provider di servizi cloud

Strumenti di data engineering

 

• Database
• Calcolo parallelo e framework (Spark)
• Pianificazione dei workflow con Airflow

Extract, Transform and Load (ETL)

 

• Extract: acquisire dati da più fonti
• Transform: trasformazioni con calcolo parallelo
• Load: caricare i dati nel database di destinazione

Caso di studio: DataCamp

 

• Recuperare dati da più fonti
• Trasformarli per creare raccomandazioni
• Caricarli nel database di destinazione

Ottimo lavoro!

Introduzione al Data Engineering