¿Tiene éxito tu sistema de IA implementado?

Comprender la inteligencia artificial

Maarten Van den Broeck

Senior Content Developer at DataCamp

¿Cuándo medir el éxito?

Ciclo de vida de la metodología MLOps

Comprender la inteligencia artificial

¿Cuándo medir el éxito?

Medir el éxito a lo largo del ciclo de vida de los MLOps

Comprender la inteligencia artificial

Medir el rendimiento sin conexión: precisión

Datos de entrenamiento y validación

Comprender la inteligencia artificial

Medir el rendimiento sin conexión: precisión

Entrenar un modelo

Comprender la inteligencia artificial

Medir el rendimiento sin conexión: precisión

Validar un modelo con ejemplos de prueba

Comprender la inteligencia artificial

Medir el rendimiento sin conexión: precisión

Comparación de las predicciones con las etiquetas reales

Comprender la inteligencia artificial

Medir el rendimiento sin conexión: precisión

Cálculo de la precisión

Comprender la inteligencia artificial

Más allá de la precisión: el error y otras métricas

Métrica del error en modelos de regresión

Métricas para motores de búsqueda y recomendación: calidad de la clasificación, diversidad en los resultados, etc.

Clasificación de productos recomendados

Comprender la inteligencia artificial

Medir el éxito en la producción

  • Degradación del modelo: el valor de la métrica medida empeora con el tiempo

Degradación del modelo

  • Métricas empresariales: Indicadores clave de rendimiento (KPI)
    • Indicador de rendimiento y progreso de los objetivos de la organización
Comprender la inteligencia artificial

Riesgos: ¿qué podría salir mal?

Los posibles riesgos incluyen:

  • Sesgo de los datos
  • Falta de transparencia
  • Cuestiones éticas
  • Fiabilidad dudosa del sistema
  • Vulnerabilidad a las ciberamenazas

Prueba de concepto (PoC):

  • Demostrador piloto para validar la viabilidad y el valor potencial + identificación temprana de riesgos
Comprender la inteligencia artificial

¡Vamos a practicar!

Comprender la inteligencia artificial

Preparing Video For Download...