La canalización de datos

Comprender la ingeniería de datos

Hadrien Lacroix

Content Developer at DataCamp

Si los datos son el nuevo petróleo...

¹ The Economist, 2017-05-06, por David Parkins

Volviendo a la ingeniería de datos

• Ingerir
• Procesar
• Almacenar
• Necesita canalizaciones
• Automatizar el flujo de una estación a otra
• Proporcionar datos actualizados, precisos y pertinentes

$$

Las canalizaciones de datos garantizan un flujo eficaz de los datos

Automatizan

• Extracción
• Transformación
• Combinación
• Validación
• Carga

Reducen

• Intervención humana
• Errores
• Tiempo que tardan en fluir los datos

ETL y canalizaciones de datos

ETL

• Marco popular para diseñar canalizaciones de datos
• 1) Extraer datos
• 2) Transformar los datos extraídos
• 3) Cargar datos transformados en otra base de datos

Canalizaciones de datos

• Mover datos de un sistema a otro
• Puede seguir ETL
• Los datos no pueden transformarse
• Los datos pueden cargarse directamente en las aplicaciones

Resumen

• Qué es una canalización de datos
• Qué hace
• Por qué es importante
• Cómo se implementan las canalizaciones de datos en Spotflix
• Qué es ETL y sus matices

¡Vamos a practicar!

Comprender la ingeniería de datos