Artificial Analysis 发布 Intelligence Index v5 引争议
先了解这件事
2026年10月28日,Artificial Analysis 发布 Intelligence Index v5 评测基准。据 Hacker News 首页报道,该版本新增 FrontierCode 2.0 和 Terminal-Bench-Science 两项基准,并升级 HLE-Diamond、AA-Omniscience v1.1 和 CritPt v2,同时将 60% 的评测改用私有测试集。同日 Reddit r/LocalLLaMA 的报道称,官方表示这是一次重大升级、排名更准确,并称开源权重模型与闭源模型的差距从 3 分扩大到 12 分。随后有用户指出,v5.0 的“Most Attractive Quadrant”中已无任何开源权重模型,也远离帕累托前沿;发帖者称旧版至少还纳入 DeepSeek、GLM、Kimi 和 Qwen,并表示准备弃用该指数、转而参考其子项基准,同时补充截图时新分数仍在陆续更新。The Decoder 报道称,Kimi K3.1 Pro 从第 4 名降至第 9 名,排在 8 个闭源模型之后,开源模型与榜首的分差从 3 分扩大到 12 分。另有用户指出该榜单已不再收录 GLM5.3 flash,并称其隐藏了 qwen 3.8 flash 等性价比高的模型,认为表格已不可靠,发帖寻求替代评估平台。
AI 根据报道生成 · 2 小时前更新
事件进展
- 10月28日 23:06 · 1 篇报道除了 Artificial Analysis,还有哪些评估最新模型的替代平台?Reddit · r/LocalLLaMA:除了 Artificial Analysis,还有哪些评估最新模型的替代平台?
- 10月28日 18:19 · 1 篇报道用户质疑Artificial Analysis v5.0榜单无开源模型Reddit · r/LocalLLaMA:Artificial Analysis v5.0 榜单“最具吸引力象限”零开源权重模型,引 LocalLLaMA 用户质疑
- 10月28日 11:06 · 3 篇报道Artificial Analysis 发布 Intelligence Index v5Hacker News · 首页:Artificial Analysis 发布 Intelligence Index v5 评测基准
报道时间线
沿着报道,了解事件的不同侧面。
- Reddit · r/LocalLLaMA除了 Artificial Analysis,还有哪些评估最新模型的替代平台?
有用户指出 Artificial Analysis 已不再收录 GLM5.3 flash,并称该榜单还隐藏了 qwen 3.8 flash 等性价比高的模型,认为其表格已不可靠。该用户因此发帖寻求可替代的模型评估平台。
- The DecoderArtificial Analysis 改版 Intelligence Index,开源与闭源模型差距扩大
Artificial Analysis 改版 Intelligence Index 后,Kimi K3.1 Pro 从第 4 名降至第 9 名,排在 8 个闭源模型之后,开源模型与榜首的分差从 3 分扩大到 12 分。
- Reddit · r/LocalLLaMAArtificial Analysis v5.0 榜单“最具吸引力象限”零开源权重模型,引 LocalLLaMA 用户质疑
Artificial Analysis 更新至 v5.0 后,其“Most Attractive Quadrant”中已无任何开源权重模型,也远离帕累托前沿。发帖者称旧版至少还纳入 DeepSeek、GLM、Kimi 和 Qwen,并表示准备弃用该指数、转而参考其子项基准。发帖者补充截图时新分数仍在陆续更新,但开源模型缺席的格局未变。
- Reddit · r/LocalLLaMAArtificial Analysis Intelligence Index 更新至 v5,开源与闭源模型差距拉大
Artificial Analysis Intelligence Index 更新到 v5,官方称这是一次重大升级、排名更准确,并称开源权重模型与闭源模型的差距从 3 分扩大到 12 分。
- Hacker News · 首页Artificial Analysis 发布 Intelligence Index v5 评测基准
Artificial Analysis 发布 Intelligence Index v5,新增 FrontierCode 2.0 和 Terminal-Bench-Science 两项基准,并升级 HLE-Diamond、AA-Omniscience v1.1 和 CritPt v2,60% 的评测改用私有测试集。
本事件热度走势
还没有足够的连续观测数据,暂不绘制趋势。