Введение в MLflow Projects

Введение в MLflow

Weston Bassler

Senior MLOps Engineer

MLflow Projects

  • Воспроизводимые

  • Многократно используемые

  • Переносимые

Повышение производительности

1 unsplash.com
Введение в MLflow

MLproject

project/
    MLproject
    train_model.py
    python_env.yaml
    requirements.txt

Github Git Repository

1 github.com
Введение в MLflow

Файл MLproject

  • name: — название проекта

  • entry_points:

    • Команда(ы) для запуска
    • Файлы .py и .sh
    • Рабочие процессы

  • python_env:

    • Среда Python
    • python_env.yaml

YAML

1 wikipedia.org
Введение в MLflow

Пример MLproject

name: salary_model

entry_points:
  main:
    command: "python train_model.py"

python_env: python_env.yaml
Введение в MLflow

train_model.py

# Import libraries and modules
import mlflow
import mlflow.sklearn
import pandas as pd
from sklearn.linear_model import LinearRegression
from sklearn.model_selection import train_test_split


# Training Data
df = pd.read_csv('Salary_predict.csv')
X = df[["experience", "age", "interview_score"]]
y = df[["Salary"]]
X_train, X_test, y_train, y_test = train_test_split(X, y, train_size=0.7,random_state=0)
Введение в MLflow

train_model.py

# Set Auto logging for Scikit-learn flavor
mlflow.sklearn.autolog()


# Train the model
lr = LinearRegression()
lr.fit(X_train, y_train)
Введение в MLflow

python_env.yaml

python: 3.10.8

build_dependencies:
- pip
- setuptools
- wheel

dependencies:
- -r requirements.txt
Введение в MLflow

requirements.txt

mlflow
scikit-learn
Введение в MLflow

Давайте потренируемся!

Введение в MLflow

Preparing Video For Download...