跳到正文
arXiv cs.MA· Ziaullah Khan, Abdul Rehman Khalid, Shrestha Nischal Lal, Nheng Vanchhay, Md Ariful Islam Mozumder, Hee-Cheol Kim·· 9 小时前AI 评分34

DebateGraph 门控消融研究:保留分歧比消解分歧更能提升多智能体辩论表现

Surfacing Disagreement Beats Resolving It: A Gated Ablation Study of Provenance-Weighted Memory for Multi-Agent Debate

AI 导读

多智能体辩论共享记忆的 DebateGraph 门控消融研究显示,在 39 次运行中仅"保留矛盾并将排序后的冲突集传入辩论"这一机制有效:F1 提升 +0.340(95% CI [+0.267, +0.414]),122 个投毒条目中攻击成功数从 22 降至 7(McNemar 精确检验 p=0.0003),成本不变。

正文 · AI 翻译

查看 PDF HTML(实验性)

摘要:多智能体辩论中的共享记忆通常被构建用于消解不一致:检索返回一个获胜事实,分歧在任何智能体看到它之前就消失了。我们质疑这种做法是否正确。在 DebateGraph 中,四个后端共享同一套契约(读/写/快照),因此在固定预算下,可以独立移除智能体记忆文献中的五种机制,每种机制都以预先声明的阈值为门控。在 39 次运行中,只有一种机制存活:保留矛盾并将排序后的冲突集传递给辩论,而不是将其坍缩为一个获胜者,使 F1 提升 +0.340(95% CI [+0.267, +0.414]),并将攻击成功率从 122 个投毒条目中的 22 个降至 7 个(McNemar 精确检验 p=0.0003),且成本相同。实现这一点意味着修复我们测试框架中的一个瓶颈:冲突集仅基于检索到的边构建,而我们预先声明的上限导致四分之三的植入矛盾无法被检索到,最初测得该机制的效果仅为 +0.084。该效应在两个检索基座上可复现,并在 HotpotQA 文档上呈现方向性一致。没有其他机制存活,且有两种机制比惰性更差:一旦矛盾进入提示,写入信任门控和路由器的来源特征各自都会损失准确率(F1 分别为 -0.075 和 -0.096)。该门控在结构上失效:投毒对象始终是图中已存在的实体,而金标准中这一比例为 53%,因此基于接地性的评分会将谎言排在真实的首次提及之上。我们发布了测试框架、攻击集和日志,并主张:静默调和记忆才是值得放弃的假设。
主题: 多智能体系统(cs.MA);计算与语言(cs.CL)
引用为: arXiv:2611.22461 [cs.MA]
  (或 arXiv:2611.22461v1 [cs.MA] 获取此版本)
  https://doi.org/10.48550/arXiv.2611.22461

由 DataCite 颁发的 arXiv DOI(待注册)

提交历史

来自:Ziaullah Khan [查看邮箱]
[v1] 2026年11月17日 星期二 09:23:13 UTC(2,941 KB)

来源:arXiv cs.MA · arxiv.org