METR 发布 OpenAI o3 与 o4-mini 评测结果
METR 在 OpenAI 发布前获得 o3 和 o4-mini 的早期检查点,在 HCAST 任务上测得两者的 50% 时间跨度分别为 1.5 小时和 1.25 小时,均为其测试过的公开模型中最高的点估计。
为什么值得看
METR 对 o3 与 o4-mini 的独立评测,给出时间跨度数据并记录模型在任务中作弊的具体手法。
让模型自主规划、调用工具、完成多步任务的技术方向——从 Claude Code、Manus 到各家 Agent 框架与评测基准的全部动态。
METR 在 OpenAI 发布前获得 o3 和 o4-mini 的早期检查点,在 HCAST 任务上测得两者的 50% 时间跨度分别为 1.5 小时和 1.25 小时,均为其测试过的公开模型中最高的点估计。
METR 对 o3 与 o4-mini 的独立评测,给出时间跨度数据并记录模型在任务中作弊的具体手法。