跳到正文
热点事件观察中

Artificial Analysis 发布 Intelligence Index v5 引争议

5 篇报道3 个报道来源2 天前更新

先了解这件事

AI 综述

2026年10月28日,Artificial Analysis 发布 Intelligence Index v5 评测基准。据 Hacker News 首页报道,该版本新增 FrontierCode 2.0 和 Terminal-Bench-Science 两项基准,并升级 HLE-Diamond、AA-Omniscience v1.1 和 CritPt v2,同时将 60% 的评测改用私有测试集。同日 Reddit r/LocalLLaMA 的报道称,官方表示这是一次重大升级、排名更准确,并称开源权重模型与闭源模型的差距从 3 分扩大到 12 分。随后有用户指出,v5.0 的“Most Attractive Quadrant”中已无任何开源权重模型,也远离帕累托前沿;发帖者称旧版至少还纳入 DeepSeek、GLM、Kimi 和 Qwen,并表示准备弃用该指数、转而参考其子项基准,同时补充截图时新分数仍在陆续更新。The Decoder 报道称,Kimi K3.1 Pro 从第 4 名降至第 9 名,排在 8 个闭源模型之后,开源模型与榜首的分差从 3 分扩大到 12 分。另有用户指出该榜单已不再收录 GLM5.3 flash,并称其隐藏了 qwen 3.8 flash 等性价比高的模型,认为表格已不可靠,发帖寻求替代评估平台。

AI 根据报道生成 · 2 小时前更新

事件进展

3 个进展
  1. 10月28日 23:06 · 1 篇报道
    除了 Artificial Analysis,还有哪些评估最新模型的替代平台?
    Reddit · r/LocalLLaMA:除了 Artificial Analysis,还有哪些评估最新模型的替代平台?
  2. 10月28日 18:19 · 1 篇报道
    用户质疑Artificial Analysis v5.0榜单无开源模型
    Reddit · r/LocalLLaMA:Artificial Analysis v5.0 榜单“最具吸引力象限”零开源权重模型,引 LocalLLaMA 用户质疑
  3. 10月28日 11:06 · 3 篇报道
    Artificial Analysis 发布 Intelligence Index v5
    Hacker News · 首页:Artificial Analysis 发布 Intelligence Index v5 评测基准

报道时间线

沿着报道,了解事件的不同侧面。

10月28日
  1. Reddit · r/LocalLLaMA
    除了 Artificial Analysis,还有哪些评估最新模型的替代平台?

    有用户指出 Artificial Analysis 已不再收录 GLM5.3 flash,并称该榜单还隐藏了 qwen 3.8 flash 等性价比高的模型,认为其表格已不可靠。该用户因此发帖寻求可替代的模型评估平台。

  2. The Decoder
    Artificial Analysis 改版 Intelligence Index,开源与闭源模型差距扩大

    Artificial Analysis 改版 Intelligence Index 后,Kimi K3.1 Pro 从第 4 名降至第 9 名,排在 8 个闭源模型之后,开源模型与榜首的分差从 3 分扩大到 12 分。

  3. Reddit · r/LocalLLaMA
    Artificial Analysis v5.0 榜单“最具吸引力象限”零开源权重模型,引 LocalLLaMA 用户质疑

    Artificial Analysis 更新至 v5.0 后,其“Most Attractive Quadrant”中已无任何开源权重模型,也远离帕累托前沿。发帖者称旧版至少还纳入 DeepSeek、GLM、Kimi 和 Qwen,并表示准备弃用该指数、转而参考其子项基准。发帖者补充截图时新分数仍在陆续更新,但开源模型缺席的格局未变。

  4. Reddit · r/LocalLLaMA
    Artificial Analysis Intelligence Index 更新至 v5,开源与闭源模型差距拉大

    Artificial Analysis Intelligence Index 更新到 v5,官方称这是一次重大升级、排名更准确,并称开源权重模型与闭源模型的差距从 3 分扩大到 12 分。

  5. Hacker News · 首页
    Artificial Analysis 发布 Intelligence Index v5 评测基准

    Artificial Analysis 发布 Intelligence Index v5,新增 FrontierCode 2.0 和 Terminal-Bench-Science 两项基准,并升级 HLE-Diamond、AA-Omniscience v1.1 和 CritPt v2,60% 的评测改用私有测试集。

本事件热度走势

还没有足够的连续观测数据,暂不绘制趋势。

关联事件