Помилки в машинному навчанні

Machine Learning для бізнесу

Karolis Urbonas

Head of Machine Learning & Science, Amazon

Помилки

  • Спочатку машинне навчання
  • Замало даних
  • Визначення цільової змінної
  • Пізнє тестування, нульовий вплив
  • Відбір ознак
Machine Learning для бізнесу

Спочатку машинне навчання

необроблена піраміда

Machine Learning для бізнесу

Замало даних

Підготовка

Machine Learning для бізнесу

Визначення цільової змінної

  • Що ми прогнозуємо?
  • Чи можемо це спостерігати?
    • Контрактний відтік — клієнт відмовився від преміальної кредитної картки
    • Неконтрактний відтік — клієнт почав купувати в іншому продуктовому магазині
  • Ґрунтовний аналіз
  • Галузева експертиза
Machine Learning для бізнесу

Відбір ознак

Інференція (що впливає на цільову змінну?)

  • Обирайте змінні, які ви можете контролювати (латентність сайту, ціна, доставка, сервіс тощо)
  • Бізнес має брати участь у відборі ознак

$$

Прогнозування (чи можемо оцінити значення цільової змінної в майбутньому?)

  • Почніть з наявних даних
  • Якщо якість моделі прийнятна, протестуйте її
  • Додавайте нові ознаки поступово
Machine Learning для бізнесу

Пізнє тестування, нульовий вплив

abtest

Machine Learning для бізнесу

Давайте потренуємось!

Machine Learning для бізнесу

Preparing Video For Download...