跳到正文
热点事件持续更新

研究者提出BRA框架评估Agent修复资源

1 篇报道1 个报道来源11 小时前更新

先了解这件事

AI 综述

Saiyue Lyu等作者提出Banzhaf Resource Attribution(BRA)框架,用于量化计算、信息、反馈三类推理期资源对Agent修复失败的边际贡献。该框架在MBPP+、HumanEval+的194个函数级失败和SWE-bench Verified的126个仓库级失败上评估六个模型,并在固定失败状态与修订协议的前提下衡量各资源的作用及其交互。 据作者描述,BRA是一个受控析因框架,通过改变资源组合来测量每类资源对修复的边际贡献。目前公开的是框架设计与评估设置,尚未给出各资源贡献高低的具体结论。

AI 根据报道生成 · 2 小时前更新

报道时间线

沿着报道,了解事件的不同侧面。

10月22日
  1. arXiv cs.CL
    卡住的 Agent 下一步该把 token 花在哪?推理期资源的因果归因

    研究者提出 Banzhaf Resource Attribution(BRA)框架,在 MBPP+、HumanEval+ 的 194 个函数级失败和 SWE-bench Verified 的 126 个仓库级失败上评估六个模型,量化计算、信息、反馈三类推理期资源的边际贡献。

本事件热度走势

还没有足够的连续观测数据,暂不绘制趋势。