Měření POC

Implementing AI Solutions in Business

Jacob H. Marquez

Data Scientist

Jak definovat úspěch?

$$

Jak definovat úspěch?

$$

Jak definovat úspěch?

$$

Jak definovat úspěch?

$$

Měření obchodní hodnoty

Měření obchodní hodnoty

Plánovací chatbot

Metriky

• Čas agenta strávený plánováním
• Počet naplánovaných schůzek
• Podíl zájemců s naplánovanou schůzkou
• Čas do potvrzení schůzky

CÍLE

• Snížit počet hodin agentů strávených plánováním
• Více času na úkoly vyšší úrovně
• Zvýšit počet naplánovaných klientů

• Podíl zrušených schůzek, které byly přeplánovány

Měření modelu AI

Měření modelu AI

• Přesnost: podíl správných předpovědí
• Důležitá metrika pro většinu řešení AI

Měření modelu AI

• Relevantní výsledky na základě vstupu
• Přímá a nepřímá relevance

Vysvětlitelnost AI

Vysvětlitelnost je schopnost porozumět rozhodovacímu procesu řešení AI.

• Spravedlnost, transparentnost, zkreslení a bezpečnost

Spravedlnost

Transparentnost

Měření výkonu řešení

Měření výkonu řešení

Měření výkonu řešení

Měření výkonu řešení

Metriky

• Doba načítání
• Čas do potvrzení schůzky
• Spokojenost zákazníků

Pojďme procvičovat!

Implementing AI Solutions in Business