评测来源官方评测
LiveBench · 推理与数学
LiveBench / 推理 · Reasoning + Mathematics 两项均分,各占 50%。
在 前沿雷达 中参与排名
证据预算4.2%
上游数据时间待核实
最近成功同步尚未开始采集
它测什么,怎么测
先分别计算 Reasoning、Mathematics 的分类成绩,再各占 50% 求平均,最后保留一位小数。两项均分与官网单独选择某一类的成绩不同。
如何使用这份证据
两项均分作为一份证据参与排名,各专项共用 LiveBench 证据家族;Global Average 仅供参考,不重复计票。
评测局限与数据署名
两项均分衡量组合表现,不能当成 Reasoning 单项成绩。官方页面切换分类或是否包含微调模型时,分数与排序会随之变化。组织参与方 Abacus.AI 同时开发 Smaug 模型,其独家成绩需要其他独立来源补充。
数据许可:Apache 2.0
分项成绩由 LiveBench 发布,AIHOT 按上述两类等权汇总并排序。两项均分与 AIHOT 共识分使用不同尺度,不能直接相加。