研究者提出BRA框架评估Agent修复资源
热点事件持续更新
研究者提出BRA框架评估Agent修复资源
1 篇报道1 个报道来源11 小时前更新
先了解这件事
AI 综述
Saiyue Lyu等作者提出Banzhaf Resource Attribution(BRA)框架,用于量化计算、信息、反馈三类推理期资源对Agent修复失败的边际贡献。该框架在MBPP+、HumanEval+的194个函数级失败和SWE-bench Verified的126个仓库级失败上评估六个模型,并在固定失败状态与修订协议的前提下衡量各资源的作用及其交互。 据作者描述,BRA是一个受控析因框架,通过改变资源组合来测量每类资源对修复的边际贡献。目前公开的是框架设计与评估设置,尚未给出各资源贡献高低的具体结论。
AI 根据报道生成 · 2 小时前更新
最新进展10月22日 12:00
卡住的 Agent 下一步该把 token 花在哪?推理期资源的因果归因报道时间线
沿着报道,了解事件的不同侧面。
10月22日
- arXiv cs.CL卡住的 Agent 下一步该把 token 花在哪?推理期资源的因果归因
研究者提出 Banzhaf Resource Attribution(BRA)框架,在 MBPP+、HumanEval+ 的 194 个函数级失败和 SWE-bench Verified 的 126 个仓库级失败上评估六个模型,量化计算、信息、反馈三类推理期资源的边际贡献。
本事件热度走势
还没有足够的连续观测数据,暂不绘制趋势。