Паттерн: автоматизация, мониторинг, реагирование на инциденты

Полностью автоматизированный MLOps

Arturo Opsetmoen Amador

Senior Consultant - Machine Learning

Что такое паттерн проектирования программного обеспечения?

$$

Универсальное решение для типичной повторяющейся задачи...

$$

$$

Автоматизация, мониторинг, реагирование

$$

$$

• Повышает надёжность проектируемых ML-систем

Три примера паттерна проектирования в MLOps

$$

1. Автоматическое переобучение модели
2. Откат модели
3. Импутация признаков

$$

1. Автоматическое переобучение модели

1. Автоматическое переобучение модели — формирование предсказаний

1. Автоматическое переобучение модели — мониторинг

1. Автоматическое переобучение модели — триггер

1. Автоматическое переобучение модели — автоматизированный конвейер

1. Автоматическое переобучение модели — развёртывание

2. Откат модели

2. Откат модели — ошибка валидации

2. Откат модели — последняя рабочая модель

2. Откат модели — повторное развёртывание

3. Импутация признаков — конвейер с интенсивной обработкой данных

3. Импутация признаков — качество данных

$$

$$

• Различное качество данных
• Некоторые признаки могут не проходить порог контроля качества

3. Импутация признаков — дефектные признаки

$$

$$

• Обнаружение дефектных признаков
• Применение импутации признаков

3. Импутация признаков — возможные решения

• Числовые значения

  $$

  • Импутация средним/медианой

  • KNN-импутация

$$

• Категориальные значения

  $$

• Импутация наиболее частой категорией

• Добавление категории «Пропущено»

Давайте потренируемся!

Полностью автоматизированный MLOps