AWS推出CloudWatch Omni,将可观测性从传统的“系统是否在运行”推进到“智能体为何如此行动”。文章指出,传统指标无法捕捉智能体返回错误答案、调用错误工具或使用过时知识库等失败,而这些恰恰是业务最关心的问题。Omni以应用为中心,基于OpenTelemetry并内嵌AI,核心是评估引擎:内置17种评估器,可对连贯性、有用性、忠实度和路由正确性等打分,支持提示词版本对比、从生产流量构建测试集并自动捕捉回归,还能持续评估实时流量以发现质量漂移。索尼已将其用于数百个智能体工作负载。AWS援引IDC预测,到2029年部署智能体将超10亿,人工审查不可行,评估因此成为新的监控方式。
📱 每天一份 AI 前沿日报
关注公众号,每天 09:00 推送 · 不错过任何重磅