Измерение PoC

Внедрение ИИ-решений в бизнесе

Jacob H. Marquez

Data Scientist

Как определить успех?

$$

Как определить успех?

$$

Как определить успех?

$$

Как определить успех?

$$

Измерение бизнес-ценности

Измерение бизнес-ценности

Чат-бот для записи на приём

Метрики

• Время агента на запись
• Количество записанных встреч
• Доля заинтересованных клиентов, записавшихся на приём
• Время до подтверждения записи

ЦЕЛИ

• Сократить время агентов на запись клиентов
• Освободить время для задач высокого уровня
• Увеличить число записанных клиентов

• Доля перенесённых отменённых записей

Измерение модели ИИ

Измерение модели ИИ

• Точность: доля правильных предсказаний
• Ключевая метрика для большинства решений ИИ

Измерение модели ИИ

• Результаты, соответствующие запросу
• Прямые и косвенные

Объяснимость ИИ

Объяснимость — это способность понять, как решение ИИ принимает решения.

• Справедливость, прозрачность, предвзятость и безопасность

Справедливость

Прозрачность

Измерение эффективности решения

Измерение эффективности решения

Измерение эффективности решения

Измерение эффективности решения

Метрики

• Время загрузки
• Время до подтверждения записи
• Удовлетворённость клиентов

Давайте потренируемся!

Внедрение ИИ-решений в бизнесе