研究：Jev式模型选项顺序偏差显著
热点事件持续更新
研究：Jev式模型选项顺序偏差显著
1 篇报道1 个报道来源11 小时前更新
先了解这件事
AI 综述
Mingyang Song 等作者发表论文，测试 Jev 式 System One 模型是否存在选择偏差。对两个 Jev 版本、十二个 Jev 复现模型和六个生成式 LLM 的测试显示，Jev 在 1,700 道题上准确率波动不足两个百分点，但打乱选项顺序后，累计失败集比原始顺序扩大 27–29%，初始答对的题目在后续呈现中持续失败。 这一损失明显大于固定顺序重复，且 Jev 在保持正确选择上并不普遍优于 LLM 基线；投票仅带来有限增益，即使全票一致的答案也经常出错。作者据此质疑 Jev 式决策结构能否减少选择偏差。
AI 根据报道生成 · 1 小时前更新
最新进展10月27日 12:00
研究揭示 Jev 风格 System One 模型的选择偏差：结构未必带来优势报道时间线
沿着报道，了解事件的不同侧面。
10月27日
- arXiv cs.CL研究揭示 Jev 风格 System One 模型的选择偏差：结构未必带来优势
针对两个 Jev 版本、十二个 Jev 复现模型和六个生成式 LLM 的测试显示，Jev 在 1,700 道题上准确率波动不足两个百分点，但打乱选项顺序后累计失败集比原始顺序扩大 27–29%，初始答对的题目在后续呈现中持续失败。这一损失明显大于固定顺序重复，且 Jev 在保持正确选择上并不普遍优于 LLM 基线；投票仅带来有限增益，即使全票一致的答案也经常出错。
本事件热度走势
还没有足够的连续观测数据，暂不绘制趋势。