衡量概念验证（POC）

在业务中实施 AI 解决方案

Jacob H. Marquez

Data Scientist

如何定义成功？

$$

业务价值。

在业务中实施 AI 解决方案

如何定义成功？

$$

AI 模型性能。

在业务中实施 AI 解决方案

如何定义成功？

$$

可解释性。

在业务中实施 AI 解决方案

如何定义成功？

$$

解决方案性能。

在业务中实施 AI 解决方案

衡量业务价值

效率。生产力。创造力。技能提升。

在业务中实施 AI 解决方案

衡量业务价值

排班聊天机器人 聊天机器人询问您今天过得如何。

指标

  • 代理用于排班的时间
  • 已安排的预约数量
  • 有意向客户的排班比例
  • 至预约确认的用时

目标

  • 减少客服在排班上的用时
  • 腾出更多时间处理高层任务
  • 提升已排班客户数量
  • 取消预约的再排班比例
在业务中实施 AI 解决方案

衡量 AI 模型

准确率。

相关性。

在业务中实施 AI 解决方案

衡量 AI 模型

准确率。

  • 准确率：正确预测的百分比
  • 大多数 AI 方案的重要指标

聊天机器人建议时间。

在业务中实施 AI 解决方案

衡量 AI 模型

相关性。

  • 基于输入给出相关结果
  • 直接与间接

聊天机器人建议地点。

在业务中实施 AI 解决方案

AI 的可解释性

可解释性是指理解 AI 方案决策过程的能力。

  • 公平性、透明性、偏见与安全性

公平性

公平性。

透明性

透明性。

在业务中实施 AI 解决方案

衡量解决方案性能

一套 AI 解决方案。

在业务中实施 AI 解决方案

衡量解决方案性能

失效的 AI 解决方案。

在业务中实施 AI 解决方案

衡量解决方案性能

失效且导致损失的 AI 解决方案。

在业务中实施 AI 解决方案

衡量解决方案性能

计时的 AI 方案。

用户体验。

指标

  • 加载时间
  • 至预约确认用时
  • 客户满意度
在业务中实施 AI 解决方案

Let's practice!

在业务中实施 AI 解决方案

Preparing Video For Download...