企業級可靠性

案例研究：使用 Databricks Genie 進行銷售分析

Stan Konkin

ML Content Developer, DataCamp

從可用到可信

整個 Sales 辦公區都在使用的 Genie 空間，上方有可靠性盾牌，旁邊有 VP 檢視，DataCamp 海軍藍與綠風格

 

  • 空間現已服務整個 Sales
  • VP 要求先證實可靠再全面上線
  • 不加新資料表，只做強化
案例研究：使用 Databricks Genie 進行銷售分析

可靠性是個循環

四步驟循環：檢閱、診斷、策訂、驗證，以箭頭成一個乾淨循環，DataCamp 海軍藍與綠風格

 

  • 先「檢閱」對話與評分
  • 再「診斷」出錯原因
  • 接著「策訂」正確槓桿
  • 最後在聊天中「驗證」修正
案例研究：使用 Databricks Genie 進行銷售分析

從 Monitor 先做診斷

$$ 螢幕擷圖：Genie 的 Monitor 分頁，列出帶有讚與倒讚評分的對話，並篩選為倒讚項目

 

$$

$$

  • 「Monitor」分頁記錄真實對話
  • 先篩選倒讚回答
  • 逐一閱讀產生的 SQL
案例研究：使用 Databricks Genie 進行銷售分析

兩種失敗，兩個原因

兩個圖示：其一問號搭配變動數字代表數值漂移；其二定義被刪線代表術語未定義

 

  • 月趨勢漂移 → 公式鬆散
  • 「Premium」未定義 → Genie 憑猜
  • 不同失敗需不同修法
案例研究：使用 Databricks Genie 進行銷售分析

修法一：鎖住趨勢

一條月度折線被綠色鎖頭固定，趨勢不再變動，DataCamp 海軍藍與綠風格

 

  • 公式鬆散 → 用「SQL 範例」鎖定
  • Genie 會重用相同計算
  • 每次執行趨勢一致
案例研究：使用 Databricks Genie 進行銷售分析

修法二：定義術語

將明確規則加入指示清單，精確界定商業術語含義，DataCamp 海軍藍與綠風格

 

  • 定義缺失 → 加「文字指示」
  • 術語一次定義，精確明確
  • 套用於所有 premium 問題
案例研究：使用 Databricks Genie 進行銷售分析

讓可靠性隨時間維持

$$

$$

螢幕擷圖：Genie 的 Benchmark 分頁，列出已修正的問題，並配有正確的基準 SQL 答案

 

$$

$$

  • 問題配對已知正確的 SQL
  • 任何變更後重跑
  • 在主管發現前攔截回歸
案例研究：使用 Databricks Genie 進行銷售分析

空間達到上線就緒的關鍵

中央儀表板帶綠色核取記號，周圍有 benchmark、清楚定義、monitor、鎖定公式等標示圖示

 

  • 公式鎖定，定義清楚
  • 持續監控並有基準
  • 如此空間才贏得信任
案例研究：使用 Databricks Genie 進行銷售分析

一起來練習吧！

案例研究：使用 Databricks Genie 進行銷售分析

Preparing Video For Download...