Felicitări

Introducere în Data Engineering

Vincent Vankrunkelsven

Data Engineer @ DataCamp

Introducere în ingineria datelor

 

• Identificarea sarcinilor unui inginer de date
• Instrumentele utilizate
• Furnizori de servicii cloud

Cutia de instrumente a inginerului de date

 

• Baze de date
• Calcul paralel și framework-uri (Spark)
• Planificarea fluxurilor cu Airflow

Extragere, Încărcare și Transformare (ETL)

 

• Extragere: preluarea datelor din mai multe surse
• Transformare: transformări prin calcul paralel
• Încărcare: datele sunt încărcate în baza de date țintă

Studiu de caz: DataCamp

 

• Preluarea datelor din mai multe surse
• Transformare pentru generarea recomandărilor
• Încărcare în baza de date țintă

Bună treabă!

Introducere în Data Engineering