InfoQ· Craig Risi·· 18 小时前AI 评估 · 55/100分数表示内容值得关注的程度,依据实质份量、信息增量、证据强度、读者相关性和可用性,按内容类型加权。显示分数为两次独立评分的平均值。AI 判断可能有误,评分不代表事实已被核实,也不同于热点榜的讨论热度。
Grafana 提出用 SLO 和错误预算衡量 AI 智能体行为
Grafana Applies SLOs and Error Budgets to AI Agent Behaviour
AI 导读
Grafana Labs 提出用评估、SLO 和错误预算衡量 AI 智能体的行为,把幻觉、任务完成度、毒性和成本等转成可长期监测的指标。其做法是先用评估把单次交互判定为是否满足某项行为标准,再将其作为 SLI 对照 SLO,例如要求 30 天内 95% 的对话被判定为完成,剩余 5% 即错误预算。
来源:InfoQ · infoq.com