Procesamiento de datos en Azure

Entender Microsoft Azure

Kevin James

Technical Lead and Training Architect

Procesamiento en tiempo real vs por lotes

• Elige el servicio según el tipo de procesamiento: tiempo real o lotes.
• Tiempo real: analítica inmediata
• Lotes: analítica programada o ad hoc

Procesamiento en tiempo real vs por lotes

• Considera el tipo de procesamiento antes de elegir un servicio
• Tiempo real: analítica inmediata
• Lotes: analítica programada o ad hoc
• Ejemplo en sanidad:
  • Tiempo real: paneles de urgencias
  • Lotes: paneles semanales
• Diferencias de infraestructura y coste

Procesos ETL

Procesos ETL

Procesos ETL

Herramientas de procesamiento

Azure Synapse Analytics

• Parte de Microsoft Fabric
  • integra big data y data warehouses
• Experiencia unificada para ingesta, preparación, gestión y entrega de datos
• Soporta análisis en tiempo real y por lotes
• Motor analítico de alto rendimiento

Azure Stream Analytics

• Habilita acceso a datos en tiempo real
• Configura analítica en tiempo real con consultas sencillas
• Gestiona streaming desde entradas diversas como blob storage
• Clave para insights inmediatos:
  • detección de fraude en un banco
  • precios dinámicos en bolsa

Azure Databricks

• Colaboración Microsoft-Databricks
  • Plataforma de analítica optimizada para Azure
• Entorno unificado para ingeniería de datos, analítica y ML
• Espacio colaborativo para data scientists e ingenieros
• Compatibilidad integrada con Data Lake
• Tiempo real y lotes

Azure Data Factory

• Servicio de integración en la nube
• Crea, programa y orquesta flujos de datos
• Agiliza procesos ETL
• Maneja diversas fuentes y formatos
• Automatiza flujos para mayor flexibilidad

Azure HDInsight

• Servicio gestionado para procesamiento rápido y personalizable
• Se ejecuta en plataformas open-source populares:
  • Hadoop
  • Spark
  • Kafka
• Escala recursos fácilmente según la demanda
• Se integra sin problemas con el almacenamiento de Azure

¡Vamos a practicar!

Entender Microsoft Azure