InfoQ 中文·· 6 小时前AI 评估 · 36/100分数表示内容值得关注的程度,依据实质份量、信息增量、证据强度、读者相关性和可用性,按内容类型加权。显示分数为两次独立评分的平均值。AI 判断可能有误,评分不代表事实已被核实,也不同于热点榜的讨论热度。
阿里巴巴孙鹏:用 BoRP「探测式评测」取代生成式 Judge,评测成本降低 97%|QCon 上海
Read, Don't Write:重塑大模型评价体系,构建全自动、可进化的“探测式”评测管线|QCon 上海
AI 导读
阿里巴巴高级技术专家孙鹏将在 QCon 上海 2026 分享 BoRP(Bootstrapped Regression Probing)评测范式,不再让模型写评语,而是直接读取 LLM 隐状态中的满意度信号,评测成本降低 97%,人类对齐度超过传统生成式 Judge。该方案在 8B 模型上对齐 GPT-4 级评测精度,成本约为其 3%,已在万亿级流量的 A/B 测试中落地。
来源:InfoQ 中文 · mp.weixin.qq.com