跳到正文
arXiv cs.AI· Jianlin Chen, Wenhui Chen, Chi Man Vong·· 3 天前AI 评分22

基于目录的 LLM 优化循环中已拒绝候选为何被重新提出

Visible but Not Avoided: State-Dependent Re-Proposal of Rejected Candidates in Catalog-Based LLM Optimization Loops

AI 导读

在三个开源 LLM 通过从 40 项编辑中命名一项来改进 GUI 智能体的目录式优化循环中,干净基态探针会低估提出者自身循环中的重复提出率(循环减探针的宏平均率为 0.32 [0.27, 0.37]),已评估的 harness-edit 配对提议占用 28-63% 的有效提出迭代。

正文 · AI 翻译

查看 PDF HTML(实验性)

摘要:LLM 优化循环通常向提议者展示它已经尝试并拒绝过的候选方案,但让提议者自行避免它们。我们探究在静态探测中测得的避免行为,是否能预测优化器自身轨迹所产生的状态中的避免行为。在基于目录的循环中,三个开放 LLM 通过从 40 个编辑中指定一个来改进 GUI 代理,重新提议可以通过编辑的名称被精确识别。干净基础状态探测低估了提议者自身循环中的重新提议(宏平均循环减探测率为 0.32 [0.27, 0.37]),并且对已评估的 harness-编辑对的提议占有效提议者迭代的 28-63%。这两种设置拒绝不同的编辑:探测所拒绝的编辑大多是提议者未选择的编辑,而循环所拒绝的编辑则是其自身先前的选择,当历史被移除时这些选择仍被偏好。普通历史会降低两个提议者的重新提议,但会提高第三个提议者的重新提议,而失败证据的影响因模型而异。用一句话陈述拒绝状态会降低每个模型中的重新提议(相对于相同 ID 的中性列表为 -0.16 [-0.22, -0.09])。对于具有精确编辑身份的基于目录的循环,拒绝避免应在循环所产生的被拒绝集合上进行测量。
评论: 22 页,6 张图
主题: 人工智能(cs.AI)
引用为: arXiv:2610.15738 [cs.AI]
  (或 arXiv:2610.15738v1 [cs.AI] 用于此版本)
  https://doi.org/10.48550/arXiv.2610.15738

arXiv 颁发的 DOI 通过 DataCite(待注册)

提交历史

来自:Jianlin Chen [查看电子邮件]
[v1] 2026 年 10 月 11 日星期日 16:18:11 UTC(139 KB)

来源:arXiv cs.AI · arxiv.org