研究：LLM评审评分受同伴上下文影响
热点事件持续更新
研究：LLM评审评分受同伴上下文影响
1 篇报道1 个报道来源10 小时前更新
先了解这件事
AI 综述
Alicia Guerra、Jiaming Qu、Yibo Hu 发表的控制实验发现，LLM 评审在多智能体系统中评估答案时，同伴上下文不仅会改变智能体给出的答案，也会改变同一答案的评分，且不同评审的反应方向相反。 实验覆盖 3 个 benchmark、4 个开源权重模型作为智能体和 6 个评审。结果显示，错误答案的同伴上下文对智能体的误导大于正确答案的帮助；评审在缺少正确答案时，难以区分已知正确与已知错误的答案。
AI 根据报道生成 · 2 小时前更新
最新进展11月6日 13:00
评审者也是实验的一部分：审计 LLM 评审对同伴上下文的敏感性报道时间线
沿着报道，了解事件的不同侧面。
11月6日
- arXiv cs.CL评审者也是实验的一部分：审计 LLM 评审对同伴上下文的敏感性
一项控制实验发现，LLM 评审在评估多智能体系统时，同伴上下文不仅会改变智能体给出的答案，也会改变同一答案的评分，且不同评审的反应方向相反。研究覆盖 3 个 benchmark、4 个开源权重模型作为智能体和 6 个评审，错误答案的同伴上下文对智能体的误导大于正确答案的帮助，评审在缺少正确答案时难以区分已知正确与已知错误的答案。
本事件热度走势
还没有足够的连续观测数据，暂不绘制趋势。