小红书技术REDtech·· 6 小时前AI 评估 · 55/100分数表示内容值得关注的程度,依据实质份量、信息增量、证据强度、读者相关性和可用性,按内容类型加权。显示分数为两次独立评分的平均值。AI 判断可能有误,评分不代表事实已被核实,也不同于热点榜的讨论热度。
小红书推荐系统评测 Agent:上下文驱动的 LLM-as-Judge 实践
AI 导读
小红书技术团队公开推荐系统评测 Agent 的实践,以一次推荐请求为评测单元,用确定性规则与 LLM-as-Judge 分工判断内容在质量、兴趣、时效和多样性上的变化。系统将上下文构建、0/1/2 三档评分标准、版本快照和人工校准串成可回放链路,并支持从实验级差异逐层下钻到具体请求与单篇证据。团队还提出 LLM-as-User 用于策略上线前的离线预筛,但不替代线上 A/B 实验。
来源:小红书技术REDtech · mp.weixin.qq.com