Шаблон автоматизації, моніторингу та реагування на інциденти

Повністю автоматизований MLOps

Arturo Opsetmoen Amador

Senior Consultant - Machine Learning

Що таке шаблон проєктування ПЗ?

$$

Загальне, багаторазове рішення для типових проблем...

$$

$$

Автоматизуйте, моніторте, реагуйте

$$

$$

• Підвищує надійність спроєктованих нами ML‑систем

Три приклади шаблону в MLOps

$$

1. Автоматичне перевчання моделі
2. Відкат моделі
3. Імпутація ознак

$$

1. Автоматичне перевчання моделі

1. Автоматичне перевчання моделі — виконання передбачень

1. Автоматичне перевчання моделі — Моніторинг

1. Автоматичне перевчання моделі — Тригер

1. Автоматичне перевчання моделі — Автоматизований конвеєр

1. Автоматичне перевчання моделі — Розгортання

2. Відкат моделі

2. Відкат моделі — Помилка валідації

2. Відкат моделі — Остання працездатна модель

2. Відкат моделі — Повторне розгортання

3. Імпутація ознак — Даномісткий конвеєр

3. Імпутація ознак — Якість даних

$$

$$

• Різний рівень якості даних
• Деякі ознаки можуть бути нижчі за поріг QA

3. Імпутація ознак — Дефектні ознаки

$$

$$

• Виявляйте проблемні ознаки
• Застосовуйте імпутацію ознак

3. Імпутація ознак — Можливі виправлення

• Числові значення

  $$

  • Імпутація середнім/медіаною

  • Імпутація KNN

$$

• Категоріальні значення

  $$

• Імпутація найчастішою категорією

• Додавання категорії "Missing"

Давайте потренуємось!

Повністю автоматизований MLOps