Mierzenie POC

Wdrażanie rozwiązań AI w biznesie

Jacob H. Marquez

Data Scientist

Jak zdefiniować sukces?

Wartość biznesowa.

Jak zdefiniować sukces?

Wydajność modelu AI.

Jak zdefiniować sukces?

Wyjaśnialność.

Jak zdefiniować sukces?

Wydajność rozwiązania.

Mierzenie wartości biznesowej

Wydajność. Produktywność. Kreatywność. Rozwój kompetencji.

Mierzenie wartości biznesowej

Chatbot do planowania spotkań Chatbot pytający o twój dzień.

Metryki

Czas agenta poświęcony na planowanie
Liczba umówionych wizyt
Odsetek zainteresowanych klientów z umówioną wizytą
Czas do potwierdzenia wizyty

CELE

Ograniczenie czasu agentów obsługi klienta poświęcanego na planowanie
Więcej czasu na zadania wymagające wysokich kompetencji
Zwiększenie liczby umówionych klientów

Odsetek odwołanych wizyt przełożonych na inny termin

Mierzenie modelu AI

Dokładność.

Trafność.

Mierzenie modelu AI

Dokładność.

Dokładność: odsetek poprawnych predykcji
Kluczowa metryka dla większości rozwiązań AI

Chatbot sugerujący terminy.

Mierzenie modelu AI

Trafność.

Wyniki trafne względem danych wejściowych
Bezpośrednie i pośrednie

Chatbot sugerujący lokalizację.

Wyjaśnialność AI

Wyjaśnialność to zdolność do zrozumienia procesu podejmowania decyzji przez rozwiązanie AI.

Sprawiedliwość, przejrzystość, stronniczość i bezpieczeństwo

Sprawiedliwość

Sprawiedliwość.

Przejrzystość

Przejrzystość.

Mierzenie wydajności rozwiązania

Rozwiązanie AI.

Mierzenie wydajności rozwiązania

Rozwiązanie AI, które nie działa.

Mierzenie wydajności rozwiązania

Rozwiązanie AI, które nie działa i generuje straty.

Mierzenie wydajności rozwiązania

Rozwiązanie AI z pomiarem czasu.

Doświadczenie użytkownika.

Metryki

Czas ładowania
Czas do potwierdzenia wizyty
Satysfakcja klienta

Czas na praktykę!

Wdrażanie rozwiązań AI w biznesie