IT之家 10 月 29 日消息,Artificial Analysis 昨日发布了 Intelligence Index v5,这是该机构自 2026 年 1 月 v4 上线以来幅度最大的一次基准重构。 最直接的变化是,60% 的评测权重首次建立在私有测试集或隐藏答案之上,用于压缩公开题库被模型训练数据“污染”的空间,减少了各厂商为了跑分而跑分的“注水”测试项目。 该指数仍由九项评测构成,包括知识工作、编码、科学、通用能力各占 25%。其中编码 25% 的权重里,Cognition 于同日发布的 FrontierCode 2.0 独占 15%,Terminal-Bench 4.0 占 10%。 其中最值得关注的 FrontierCode 2.0 完全换了一套评分逻辑。132 项任务全部来自真实开源仓库,模型提交的代码改动不再只由单元测试是否通过来判定,而是由该仓库的维护者按“是否愿意合并这个 PR”来打分,任何一项阻塞性检查失败即记零分。 Cognition 在 6
ARTICLE
/
IT之家
Artificial Analysis Intelligence Index v5 基准上线,DeepSeek V4.1 Flash 1017 为 FrontierCode 2.0 开源模型最高成绩
2026年10月29日 01:06 · 来自 IT之家