ARC-AGI-3双分数是什么:2026 Astra标准与适配器评测全解析
ARC Prize在9月3日为Astra贴出62.7%与99.9%两套ARC-AGI-3分数。故事是测试架,不是又一篇旗舰稿。
2026年9月3日,ARC Prize基金会在官方博客公布 GPT-6 Astra 在 ARC-AGI-3 Semi-Private 上的两套分数:标准测试架 62.7%、Provider Adapter 99.9%。同一模型、同一基准,差了三十多个百分点。
这不是又一篇旗舰发布稿。OpenAI 当天也在推 Astra;本篇只读 ARC Prize 自己贴出的两套测试架,以及基金会写明的读法:标准架用来比模型,适配器用来看厂商自己的上下文管理。
两套测试架,两个问题
ARC-AGI-3 是交互式推理基准:智能体要在陌生的回合制环境里探索、推断目标、自己建内部模型,没有说明书。基金会写过:人类能解完全部环境;基准刚上线时,当时测过的前沿系统几乎都低于 1%。
Standard harness
提供方中立的最小接口。模型可以带走它自己选择留下的可见笔记。Astra(max)在 Semi-Private 上 62.7%,花费 26,098 美元。基金会认为未来的 AGI 应能在这套条件下过关,也用它做跨厂商对比。
Provider Adapter
保留请求之间看不到的推理状态,并用压缩管理长对话,让模型复用先前工作。Astra(high)99.9%,花费 18,817 美元。分数更高,账单更低。
两套都写进榜
基金会说往后 ARC-AGI 排行榜会同时报两套条件,并各自标注。开源测试仓库与测试政策文档同时覆盖两种做法。
怎么读这两套数字
-
1
先看标准架
62.7% 是跨厂商可并排比较的数字。R&D World 与多家转述把它当作买家应带走的分数。OpenAI 发布页则把 99.9% 放在主表。
-
2
再看适配器在问什么
适配器问的是:模型配上厂商为自己设计的上下文管理时能做到哪一步。跨 Public 与 Semi-Private、全部推理档,适配器跑法合计用时约快 3.66 倍;两边都解出的 167 组游戏—推理对上,总 token 少 49%。
-
3
再看动作效率
在 Provider Adapter 上,Astra(max)有 96.0% 的关卡动作数低于人类中位基线,每关平均少 51.7% 步。基金会把这写成相对人类的动作效率里程碑,不是完成率本身。
基金会自己怎么划界
Astra 的回放里,模型会把陌生机制收成紧凑的符号世界模型,并自造简写记录状态与计划。PRO-LONG 红队架里它还能写关卡专用解析器与规划脚本;基金会提醒:那是模型加工具,不能和受控人类测试直接比。
| 项目 | 公开数字 | 怎么读 |
|---|---|---|
| 标准架 / max | 62.7%,26,098 美元 | 跨厂商对比用这套 |
| 适配器 / high | 99.9%,18,817 美元 | 带厂商上下文管理 |
| 适配器 / max | 98.6%,17,332 美元 | 更高努力档未必更高分 |
ARC Prize 自己的句子:刷满 ARC-AGI-3 并不代表「证明已经实现 AGI」。环境有界、机制确定、目标封闭,不等于开放世界。
- 标准架带走什么
- 模型自己决定在可见笔记里留什么。接口最小,便于并排比较。
- 适配器带走什么
- 不透明推理状态在请求之间保留,长对话会被压缩。分数和耗时都会变。
- 人类基线怎么来的
- 上线前约 500 名普通参与者;每关人类基线取完成者的动作数中位数。被试按场次计酬,不是职业解谜选手。
和同事对齐两套分时
读完后通常缺一张图:标准架 62.7%、适配器 99.9%、以及「不是 AGI」这句边界。不必再装会议套件。可在tidemeet开短时空间,或看如何创建空间。同期独立调查见METR 与 OpenAI / Hugging Face 评测;另一套实验室协议见DeepMind 双盲飞地评测。
# 对照轴
standard-62.7 → adapter-99.9 → not-agi
还有疑问?
这是在写 GPT-6 Astra 发布本身吗?
不是。Astra 3日开始分阶段上线;本篇只解释 ARC Prize 当天公布的两套 ARC-AGI-3 分数和测试架差异。
哪一个分数该用来比其他模型?
基金会把标准架当作跨厂商的苹果对苹果条件。适配器分数描述的是带厂商上下文管理时的上限,不能直接拿去压没有同一适配器的模型。
99.9% 是不是算实现 AGI?
基金会写明不是。ARC-AGI-3 环境有界、目标封闭。他们把 Astra 写成对泛化的实质进展,并停在这一步。
和临时协作工具有什么关系?
没有产品绑定。若只是要把两套测试架画在一张图上,临时会议工具对比说明何时用短时浏览器空间即可。