MLOps 生命週期階段

Fully Automated MLOps

Arturo Opsetmoen Amador

Senior Consultant - Machine Learning

MLOps 生命週期

MLOps 生命週期包含三個核心階段：

• 三個階段是反覆進行的
• 三個階段彼此相依、相互連結
• 在各階段之間來回是正常的

ML 生命週期中的 MLOps－Design

Design 階段包含：

• 商業理解

  $$

• 資料理解

  $$

• 設計 ML 解決方案

$$

ML 生命週期中的 MLOps－Design

Design 階段包含：

• 商業理解

  $$
  • 了解商業脈絡
  • 設定商業目標

$$

ML 生命週期中的 MLOps－Design

Design 階段包含：

• 資料理解

  $$
  • 資料探索
  • 資料視覺化

$$

ML 生命週期中的 MLOps－Design

Design 階段包含：

• 系統設計

  $$
  • 系統架構設計
    • 資料安全
    • 資料隱私

$$

ML 生命週期中的 MLOps－Design

Design 階段包含：

• 商業理解

  $$

• 資料理解

  $$

• 設計 ML 解決方案

$$

設計階段多數無法自動化

$$

ML 生命週期中的 MLOps－Development

ML 實驗與開發階段包含： $$

• 開發概念驗證（PoC）

  $$

• 資料工程

  $$

• 模型開發

$$

ML 生命週期中的 MLOps－Development

ML 實驗與開發階段包含：

• 開發概念驗證（PoC）

  $$
  • 流程與自動化並用
  • 使用框架

$$

ML 生命週期中的 MLOps－Development

ML 實驗與開發階段包含：

• 資料工程（PoC）

  $$
  • 善用自動化 → 品質保證

$$

ML 生命週期中的 MLOps－Development

ML 實驗與開發階段包含：

• 模型開發（PoC）

  $$
  • 實驗追蹤
  • 自動化訓練
  • 自動化超參數調校

$$

ML 生命週期中的 MLOps－Deployment

ML 部署與營運階段包含：

• 正式產品化
  • 測試
  • 版控
  • 持續交付
  • 監控

$$

為規模而建：先自動化

我們透過流程精簡、最佳實務與自動化

當未使用自動化、流程精簡時：

• CRISP-DM
• TDSP [1]

¹ https://www.ibm.com/docs/en/spss-modeler/saas?topic=dm-crisp-help-overview

流程精簡與最佳實務

$$

設計階段

$$

• 最佳實務

  • 納入領域專家

  • 讓商業利害關係人參與

  • 蒐集最終使用者回饋

$$

開發階段

$$

• 最佳實務

  • 撰寫乾淨的程式碼
  • 撰寫文件紀錄

一起來練習吧！

Fully Automated MLOps