发布日期

Artificial Analysis 独立评测:GPT-6.1 Sol 智力指数仅比 GPT-6 Astra 低 1 分,单任务成本不到其四分之一

独立评测站 Artificial Analysis 称,GPT-6.1 Sol 在 GPT-6 Sol 推出 7 天后即取代后者;新模型(max)在该站智力指数上比 GPT-6 Astra 低 1 分,每项指数任务成本约 0.72 美元,不到 Astra(3.26 美元)的四分之一,但输出 Token 比 GPT-6 Sol 多 10–30%。

Artificial Analysis 智力指数排名与成本散点图,标出 GPT-6.1 Sol
Artificial Analysis 文中图表:上图为智力指数排名,GPT-6.1 Sol(max)得 52 分,低于 GPT-6 Astra(max,53)和三款 Claude 模型,高于 GPT-6 Sol(max,48)与 GPT-5.6 Sol(max,47);下图为智力指数相对单任务成本(对数坐标)的散点,GPT-6.1 Sol 的各推理档位均落在帕累托线上。图片来源:Artificial Analysis。

Artificial Analysis 测得,GPT-6.1 Sol 的智力指数比 GPT-6 Sol 高 4 分、比 GPT-5.6 Sol 高 5 分,落在 GPT-6 Astra 之下 1 分。提升集中在智能体知识工作:AA-Briefcase v1.1 与 GDPval-AA v2.1 分别提高 4 分和 5 分;此外 Terminal-Bench 4.0 提高 12 分,Humanity’s Last Exam 提高 5 分,GDP.pdf 提高 6 分;AA-Omniscience 准确率提高 8 分,幻觉率从 60% 降到 54%。

按每项智力指数任务计算,GPT-6.1 Sol(max)的成本为 0.72 美元,GPT-6 Astra(max)为 3.26 美元;它也比 GPT-6 Sol(1.05 美元)低 31%,比 GPT-5.6 Sol(1.99 美元)低 64%。该站称,GPT-6.1 Sol 的各推理强度都推高了成本效率的帕累托前沿:在同等智力水平上没有更便宜的模型。代价是输出 Token 比 GPT-6 Sol 多约 10–30%;不过因分数提高,其 low 与 medium 档在 Token 效率上仍是帕累托最优。

价格与 GPT-6 Sol 相同,每百万输入/输出 Token 为 2/10 美元,只是缓存读取折扣从 90% 提高到 95%,因此智能体类负载的综合价格略低于 GPT-6 Sol。在该站的编程智能体指数(Coding Agent Index)上,GPT-6.1 Sol(max)比 GPT-6 Sol 高 3 分、比 GPT-6 Astra 低 2 分;xhigh 档反而比 max 高 3 分,并比 Astra 高 1 分,单任务成本不到 Astra 的 15%。以上分数与成本均为 Artificial Analysis 在其指数和设置下的测量。

来源

  1. GPT-6.1 Sol replaces GPT-6 Sol after just 7 days, with near-Astra intelligence — Artificial Analysis 完整文章(网页)
在 ? 中打开这篇 →