跳到正文
评测来源

LiveBench · 语言与指令

LiveBench · Language + IF 两项均分,各占 50%。

官方评测
在 MyHOT 中参与排名
证据预算3%
上游数据时间09/29 03:39
最近成功同步09/29 23:21

它测什么,怎么测

先分别计算 Language、IF 的分类成绩,再各占 50% 求平均,最后保留一位小数。两项均分与官网单独选择某一类的成绩不同。Language 衡量语言理解,IF 衡量指令与格式约束,不据此评价小说文笔。

如何使用这份证据

保留综合榜写作与表达预算中的 3%;不进入文学创作的写作分类。

评测成绩

按固定规则,每个公开模型采用一套代表配置。匿名测试型号不展示,保留原榜名次,每项最多 30 个。

原榜名次原榜型号原始成绩代表配置
1gemini-3.8-flash-highGoogle84.6%High 推理
2claude-fable-5-max-effortAnthropic83.2%Max 推理
3gemini-3.7-flash-highGoogle82.7%High 推理
4gpt-6-astra-maxOpenAI82.5%Max 推理
5gemini-3.1-pro-preview-highGoogle82.2%High 推理
6claude-fable-5-1-max-effortAnthropic81.2%Max 推理
7muse-spark-1.3-xhighMeta80.4%xHigh 推理
8gemini-3.5-flash-highGoogle80.1%High 推理
9gpt-5.6-sol-maxOpenAI79.8%Max 推理
10gemini-3.6-flash-highGoogle79.6%High 推理
11gpt-5.5-xhighOpenAI79.0%xHigh 推理
12kimi-k3Moonshot AI78.4%来源默认配置
13grok-4.6xAI77.8%来源默认配置
14grok-4.7-xhighxAI77.7%xHigh 推理
15smaug-agenticAbacus.AI77.7%来源默认配置
16grok-4.5xAI77.2%来源默认配置
18gpt-6-sol-maxOpenAI76.9%Max 推理
19qwen3.7-maxAlibaba76.9%来源默认配置
20qwen3.8-maxAlibaba76.9%来源默认配置
21muse-spark-1.2-xhighMeta76.4%xHigh 推理
22gpt-5.4-xhighOpenAI76.4%xHigh 推理
24claude-opus-5-max-effortAnthropic76.2%Max 推理
25claude-opus-5-5-max-effortAnthropic76.0%Max 推理
26qwen3.8-flash-nextAlibaba75.9%来源默认配置
27claude-opus-4-8-max-effortAnthropic75.8%Max 推理
28deepseek-v4-flash-vision-expDeepSeek75.7%来源默认配置
29deepseek-v4.1-flash-maxDeepSeek75.6%来源默认配置
30smaug-miniAbacus.AI75.5%来源默认配置
31deepseek-v4-pro-0813DeepSeek74.9%来源默认配置
32glm-5.3Z.ai74.6%来源默认配置
评测局限与数据署名

两项均分衡量组合表现,不能当成 Language 单项成绩。官方页面切换分类或是否包含微调模型时,分数与排序会随之变化。组织参与方 Abacus.AI 同时开发 Smaug 模型,其独家成绩需要其他独立来源补充。

数据许可:Apache 2.0

分项成绩由 LiveBench 发布,AIHOT 按上述两类等权汇总并排序。两项均分与 AIHOT 共识分使用不同尺度,不能直接相加。