评测来源官方评测
LiveBench · 推理与数学
LiveBench / 推理 · Reasoning + Mathematics 两项均分,各占 50%。
在 AI Insight Hub 中参与排名
证据预算4.2%
上游数据时间09/30 03:01
最近成功同步10/03 20:05
它测什么,怎么测
先分别计算 Reasoning、Mathematics 的分类成绩,再各占 50% 求平均,最后保留一位小数。两项均分与官网单独选择某一类的成绩不同。
如何使用这份证据
两项均分作为一份证据参与排名,各专项共用 LiveBench 证据家族;Global Average 仅供参考,不重复计票。
评测成绩
按固定规则,每个公开模型采用一套代表配置。匿名测试型号不展示,保留原榜名次,每项最多 30 个。
评测局限与数据署名
两项均分衡量组合表现,不能当成 Reasoning 单项成绩。官方页面切换分类或是否包含微调模型时,分数与排序会随之变化。组织参与方 Abacus.AI 同时开发 Smaug 模型,其独家成绩需要其他独立来源补充。
数据许可:Apache 2.0
分项成绩由 LiveBench 发布,AIHOT 按上述两类等权汇总并排序。两项均分与 AIHOT 共识分使用不同尺度,不能直接相加。