第三方评测机构METR公布一项历时11周的调查,披露Anthropic四款未公开内部模型,其中2026年9至10月完成训练的Model 4在内部综合能力指数AECI上取得178.6分,高于已公开的Opus 5.5和Mythos 5.1。
METR称,Anthropic模型的能力提升速度已约为2024年3月至2025年10月期间的2倍,转折点出现在2025年10月,而这一加速中约80%来自AI自身的研发辅助,而非训练算力扩张。
未公开的Model 4
METR在报告附录中列出Anthropic四款从未公开的内部模型:2022年训练完成的Unreleased 2022、2026年7月训练完成的Model 2、8至9月训练完成的Model 3,以及9至10月训练完成的Model 4。其中Model 4是训练时间最近、也是此次披露中得分最高的一款。
AECI的作用是把各项基准测试成绩折算成一个综合分数,METR将其比作把各科卷面成绩汇总成总分。
有网友根据报告中的时间线推测,图中的Model 3即传闻中的Mythos 5.5,但这一说法来自网络讨论,并非METR报告确认的结论。

能力指数与基准表现
在单项基准上,Model 4参加的15项测试正确率全部超过50%。作为对照,9个月前的Opus 4.6仍有若干基准未能过半。METR认为这还不是Model 4的上限。
METR在报告中做了一次剔除干扰的检验,发现15项基准中有3项存在长尾题目过难或题目损坏造成的凹陷。将这3项剔除后重新计算,Model 4的AECI得分再上升1.1分,达到179.7分。
Token消耗数据同样显示测试尚未触及模型边界:跑一次普通基准测试,单个任务平均消耗250万输入Token、生成7万多输出Token;在Agent写代码的场景下,单任务输入Token达1000万,输出9.4万Token。METR评测人员表示,现有考卷已接近无法测出Model 4的极限。
Anthropic在IPO前更新的S-1招股书中新增了一条风险提示。据其内部估算,未来的模型将很快触发“AI显著加速研发”的阈值,即一年完成过去两年的工作量。

加速拐点与归因
METR给出的拐点日期是2025年10月7日。在此之前,Anthropic模型的AECI得分每年约上涨15分;此后曲线明显上拐,变为每年上涨29分,增速约为过去的1.9倍,95%置信区间在1.5倍到2.8倍之间。
Anthropic曾在今年8月的风险报告中提出一种温和解释,认为这只是启用新工具和新评测方法带来的一次性台阶式跳跃。METR为此做了盲测对比:用Mythos 5及更早模型的数据画出两条预测线,再盲测后来出炉的Model 2、Model 3、Opus 5.5和Model 4。结果显示,在81%的统计抽样中,按长期持续提速预测的误差仅1.9分,而按一次性跳涨预测的误差为3.9分。
在归因上,METR排除了靠堆训练算力提速的可能,因为2025年10月之后训练算力的增长率反而比此前更慢。METR估算,当前约2倍的研发加速中,约80%来自AI自身的研发辅助,其余小部分来自研究员人数增加和推理算力扩容。
按METR的换算,2倍加速度意味着Anthropic在一年内走完了过去两年的技术路程;若放在指数增长维度下,原本每年翻3倍的指标在2倍加速度下会变为每年翻9倍。

研究员工作流变化
由于外部尚无人能直接测试Model 4,Anthropic内部研究员的实测成为主要观察窗口。METR公开了内部非正式调查与Slack全员投票的趋势图:2025年春天使用3.7 Sonnet和Opus 4时,员工自报效率提升为1.3至1.4倍;今年6月的Mythos 5约为5倍;今年10月用上Model 4后,自报研发提速约12倍,按指数拟合相当于每年增长3.9倍。
为弄清这一变化的来源,METR在9月底深度访谈了11位Anthropic一线技术研究员。受访研究员J将工作流分为三个阶段:最初把Claude当作自动补全工具,写一次性小脚本;随后人类在旁盯着单个Claude实例开发完整功能;现在内部推行“全面Claude化”,研究员同时指挥大量Agent并行跑实验。
受访研究员C、D和E提到,公司今年发起内部悬赏,鼓励把平时不敢尝试的想法交给AI Agent执行,于是有人把10个研究点子同时投入内部Agent系统。受访研究员A表示,从产生想法到跑通实验的时间缩短了80%,并称自己现在只卡在点子和算力上,不再卡在写代码上。受访研究员B估算自己整体提速3倍,感觉像多了几个随叫随到的博士后和研究生。
多位受访研究员向METR证实,AI尚未完全独自接管最核心的模型训练设计,但AI自主贡献核心训练已出现明显的迹象。
报告删节与瓶颈判断
METR在官方帖中表示,他们向Anthropic提交了约100页的完整报告,但Anthropic在公开版中删去了大部分信息量最大的核心证据。公开版报告中多处出现涂黑标记,其中一张原本用于预测Anthropic未来几个月新模型能力得分的表格连同整段分析被整块删去。
在METR看来,未来12个月内,无论算法、算力还是数据,都没有出现会让这台加速机器停下来的明显瓶颈。报告呈现的链条是:更强的Claude为研究员节省约80%的实验时间,节省下来的时间又被用于训练出AECI达178.6分的Model 4。
METR研究员Ryan Greenblatt评价称,这份报告是通向一两年内实现ASI的重要信号。这一判断属于研究者的个人表述,报告本身给出的仍是能力指数、增速区间与归因估算等数据。
要点
- Model 4于2026年9至10月完成训练
- Model 4的AECI得分为178.6
- 剔除3项异常基准后得分升至179.7
- 2025年10月后AECI年增速为此前1.9倍
- 约80%研发加速来自AI自身辅助

正在读取登录状态…
暂无讨论,说说你的看法吧