跳到正文
热点事件持续更新

InferBench发布:测试LLM推断用户优先级能力

1 篇报道1 个报道来源6 小时前更新

先了解这件事

AI 综述

2026年10月7日,Reddit r/LocalLLaMA报道了InferBench基准的发布。该基准使用20个场景、2800条对话,测试12个前沿大语言模型从指令中推断用户优先级的能力。测试结果显示,当用户偏好明确表达时,模型选择正确率达89%,但当偏好未明说时,正确率降至60%。具体得分方面,GPT-6 Astra为76%,MiMo V2.6 Pro为75%,Gemini 3.1 Pro为69%。报道特别提到MiMo V2.6 Pro在用户意图理解上几乎追平GPT-6 Astra。此外,GPT-6 Astra表现出一种行为模式:当用户偏好未明说时总会追问澄清,而在偏好明确时则不追问。但该模型也存在过度自信问题,在其288个错误决策中,有105个以超过90%的置信度提交。目前这是该事件的首次报道,暂无后续进展。

AI 根据报道生成 · 5 小时前更新

报道时间线

沿着报道,了解事件的不同侧面。

10月7日
  1. Reddit r/LocalLLaMA (开源AI)
    MiMo V2.6 Pro 在 InferBench 用户意图理解上几乎追平 GPT-6 Astra

    InferBench 用 20 个场景、2.8k 条对话测试 12 个前沿 LLM 从指令中推断用户优先级的能力。偏好明确时模型选对率 89%,未明说时降到 60%;具体得分 GPT-6 Astra 76%、MiMo V2.6 Pro 75%、Gemini 3.1 Pro 69%。Astra 在偏好未明说时总会追问澄清、明说时则不问;但 288 个错误决策中有 105 个以 >90% 置信度提交。

本事件热度走势

当前热度 9·可比范围峰值 10(10月7日 09:00)·近 24 小时可比范围变化 –

02.557.51010月7日09:0010月7日10:0010月7日12:0010月7日13:00

趋势仅比较持续完整观测到的相同主体,范围可能小于当前热度统计。移动指针或点击图表查看每小时热度;键盘可用左右方向键切换。