从原型到生产

构建可扩展的 Agentic 系统

Korey Stegared-Pace

Senior AI Cloud Advocate, Microsoft

全局视图

应用中的代理 v2.1

构建可扩展的 Agentic 系统

步骤 1:验证真实交互

 

测试导致失败,失败带来理解。

—— 伯特·鲁坦(Burt Rutan)

伯特·鲁坦

构建可扩展的 Agentic 系统

步骤 1:验证真实交互

 

用户错误

模拟数据

1 nip over = 英式俚语:短暂拜访
构建可扩展的 Agentic 系统

步骤 2:全面测试:单元测试

单元测试

构建可扩展的 Agentic 系统

步骤 2:全面测试:集成测试

集成测试

构建可扩展的 Agentic 系统

步骤 2:全面测试:评估系统提示词

评估系统提示词

构建可扩展的 Agentic 系统

步骤 2:全面测试:主观评估

人工评审

构建可扩展的 Agentic 系统

步骤 2:全面测试:主观评估

LLM 作为评审

构建可扩展的 Agentic 系统

步骤 3:护栏与可观测性

 

内容过滤器

回退机制

构建可扩展的 Agentic 系统

步骤 3:护栏与可观测性

日志记录

 

数据收集

构建可扩展的 Agentic 系统

步骤 4:影子部署

 

影子部署

构建可扩展的 Agentic 系统

步骤 5:部署策略

部署策略 1

构建可扩展的 Agentic 系统

步骤 5:部署策略

部署策略 2

构建可扩展的 Agentic 系统

步骤 5:部署策略

部署策略 3

构建可扩展的 Agentic 系统

最终清单

发布前清单

构建可扩展的 Agentic 系统

Ayo berlatih!

构建可扩展的 Agentic 系统

Preparing Video For Download...