¡Enhorabuena!

Introducción a la ingeniería de datos

Vincent Vankrunkelsven

Data Engineer @ DataCamp

Introducción a data engineering

 

• Identificar las tareas de un data engineer
• Qué herramientas usa
• Proveedores de servicios en la nube

Caja de herramientas de data engineering

 

• Bases de datos
• Cómputo en paralelo y frameworks (Spark)
• Orquestación de flujos con Airflow

Extract, Load and Transform (ETL)

 

• Extraer: obtener datos de varias fuentes
• Transformar: aplicar transformaciones con cómputo en paralelo
• Cargar: volcar datos en la base de destino

Caso práctico: DataCamp

 

• Obtener datos de múltiples fuentes
• Transformarlos para generar recomendaciones
• Cargarlos en la base de destino

¡Buen trabajo!

Introducción a la ingeniería de datos