跳到正文
热点事件持续更新

研究者提出多智能体同行评审式LLM评测协议

1 篇报道1 个报道来源10 小时前更新

先了解这件事

AI 综述

Yanki Margalit等研究者提出名为Agents-as-Peers的分布式评估协议,把LLM评测改为多智能体同行评审:每个LLM智能体既生成任务、回答共享任务集,也评审同伴的答案,不设特权评审者,并排除自评。 在12个LLM、420道由智能体生成的问题上,每种评审机制聚合了55,440条非自评同行评审。报道未给出该协议与既有评测方法的效果对比结论。

AI 根据报道生成 · 52 分钟前更新

报道时间线

沿着报道,了解事件的不同侧面。

10月21日
  1. arXiv cs.AI
    Agents-as-Peers:将 LLM 评估变为多智能体同行评审的偏差控制协议

    研究者提出 Agents-as-Peers 分布式评估协议,让每个 LLM 智能体同时生成任务、回答共享任务集并评审同伴答案,且不设特权评审者、排除自评。在 12 个 LLM、420 道智能体生成问题的实例中,每种评审机制聚合 55,440 条非自评同行评审。

本事件热度走势

还没有足够的连续观测数据,暂不绘制趋势。