Mesurer la POC

Mettre en œuvre des solutions d'IA en entreprise

Jacob H. Marquez

Data Scientist

Comment définir la réussite ?

Valeur d'affaires.

Comment définir la réussite ?

Performance du modèle d'IA.

Comment définir la réussite ?

Explicabilité.

Comment définir la réussite ?

Performance de la solution.

Mesurer la valeur d'affaires

Efficacité. Productivité. Créativité. Développement des compétences.

Mesurer la valeur d'affaires

Robot de clavardage d'horaire Robot de clavardage demandant des nouvelles de votre journée.

Mesures

Temps d'agent consacré à la planification
Nombre de rendez-vous planifiés
Pourcentage de clients intéressés planifiés
Délai jusqu'au rendez-vous réservé

OBJECTIFS

Réduire les heures des agents au service à la clientèle consacrées à la planification
Libérer du temps pour des tâches de niveau supérieur
Augmenter le nombre de clients planifiés

Pourcentage de rendez-vous annulés replanifiés

Mesurer le modèle d'IA

Précision.

Pertinence.

Mesurer le modèle d'IA

Précision.

Précision : pourcentage de prédictions correctes
Mesure importante pour la plupart des solutions d'IA

Robot de clavardage suggérant des heures.

Mesurer le modèle d'IA

Pertinence.

Résultats pertinents selon l'entrée
Directe et indirecte

Robot de clavardage suggérant un lieu.

Explicabilité de l'IA

L'explicabilité est la capacité de comprendre le processus décisionnel de la solution d'IA.

Équité, transparence, biais et sécurité

Équité

Équité.

Transparence

Transparence.

Mesurer la performance de la solution

Une solution d'IA.

Mesurer la performance de la solution

Une solution d'IA qui ne fonctionne pas.

Mesurer la performance de la solution

Une solution d'IA qui ne fonctionne pas et entraîne des pertes.

Mesurer la performance de la solution

Solution d'IA chronométrée.

Expérience utilisateur.

Mesures

Temps de chargement
Délai jusqu'à la confirmation du rendez-vous
Satisfaction de la clientèle

Passons à la pratique !

Mettre en œuvre des solutions d'IA en entreprise