Fiabilité en entreprise

Étude de cas : Analytics des ventes avec Databricks Genie

Stan Konkin

ML Content Developer, DataCamp

Du fonctionnel au fiable

Un espace Genie désormais utilisé sur tout un plateau Sales, avec un bouclier de fiabilité et une personne VP qui le consulte, style bleu marine et vert DataCamp

 

  • L'espace sert désormais toute l'équipe Sales
  • Le/la VP veut de la fiabilité avant le déploiement complet
  • Pas de nouvelles tables, juste du durcissement
Étude de cas : Analytics des ventes avec Databricks Genie

La fiabilité est une boucle

Un cycle en quatre étapes : reviewer puis diagnostiquer puis curer puis vérifier, dessiné en boucle d'arrows propre, style bleu marine et vert DataCamp

 

  • « Review » des conversations et notes
  • « Diagnose » des problèmes
  • « Curate » le bon levier
  • « Verify » la correction en chat
Étude de cas : Analytics des ventes avec Databricks Genie

Commencez par diagnostiquer dans Monitor

$$ CAPTURE D'ÉCRAN : L'onglet Genie Monitor listant des conversations avec des évaluations pouce levé/baissé, filtré sur les pouces baissés

 

$$

$$

  • L'onglet « Monitor » enregistre les vraies conversations
  • Filtrer sur les réponses avec pouce baissé
  • Lire chaque SQL généré
Étude de cas : Analytics des ventes avec Databricks Genie

Deux échecs, deux causes

Deux icônes : un point d'interrogation avec des chiffres qui varient (valeur instable) et une définition barrée (terme non défini)

 

  • Tendance mensuelle qui dérive → formule floue
  • « Premium » non défini → Genie devine
  • Échecs différents, correctifs différents
Étude de cas : Analytics des ventes avec Databricks Genie

Corriger 1 : verrouiller la tendance

Un graphique mensuel verrouillé par un cadenas vert pour le stabiliser, style bleu marine et vert DataCamp

 

  • Formule floue → verrouiller avec un exemple SQL
  • Genie réutilise le calcul exact
  • Même tendance à chaque exécution
Étude de cas : Analytics des ventes avec Databricks Genie

Corriger 2 : définir le terme

Une règle claire ajoutée à une liste d'instructions, qui fixe le sens d'un terme métier, style bleu marine et vert DataCamp

 

  • Définition manquante → instruction textuelle
  • Définir le terme une fois, précisément
  • Appliqué à chaque question premium
Étude de cas : Analytics des ventes avec Databricks Genie

Maintenir la fiabilité dans le temps

$$

$$

CAPTURE D'ÉCRAN : L'onglet Genie Benchmark listant des questions corrigées, chacune associée à une requête SQL de référence

 

$$

$$

  • Associer les questions à un SQL de référence
  • Réexécuter après chaque changement
  • Détecter une régression avant la direction
Étude de cas : Analytics des ventes avec Databricks Genie

Ce qui rend un espace prêt pour la prod

Un tableau de bord central avec un coche vert, entouré d'icônes étiquetées : benchmark, définitions claires, monitor et formules verrouillées

 

  • Formules verrouillées, définitions claires
  • Monitoring et benchmarking
  • C'est ainsi qu'un espace gagne la confiance
Étude de cas : Analytics des ventes avec Databricks Genie

Passons à la pratique !

Étude de cas : Analytics des ventes avec Databricks Genie

Preparing Video For Download...