真值可用性

机器学习监控概念

Hakim Elakhrass

Co-founder and CEO of NannyML

即时真值

• 衡量实际表现

• 评估简单

• 准确

生产数据——即时

延迟真值

• 延迟取决于应用
• 典型场景：贷款违约预测
• 期间表现未知
• 需估计性能

生产数据——延迟

真值缺失

• 常见于全自动流程
• 典型场景：保险定价
• 实际表现未知
• 需估计性能

生产数据——缺失

Passons à la pratique !

机器学习监控概念