热点事件持续更新

研究者提出RAG弃答基准DeclineCraft

1 篇报道1 个报道来源10 小时前更新

先了解这件事

AI 综述

Atharva Thakur 等研究者提出 RAG 弃答基准 DeclineCraft，以语料截止后 Minecraft 新增功能作为不可答问题，并审计模型是否已通过参数知识接触过这些内容。在 27 个 LLM 上测试，单次检索在 40 种配置中的 38 种显著提升正确弃答率；迭代 RAG 则在 30 种配置中显著降低正确弃答率，均值降至 46.4%，而答案准确率仅从 68.5% 变为 69.3%。

AI 根据报道生成 · 1 小时前更新

最新进展10月21日 12:00

DeclineCraft：联合衡量检索与参数知识的 RAG 弃答基准

报道时间线

沿着报道，了解事件的不同侧面。

10月21日

12:00
arXiv cs.CL
DeclineCraft：联合衡量检索与参数知识的 RAG 弃答基准
研究者提出 DeclineCraft，一个以 Minecraft 在语料截止后新增功能为不可答问题的动态弃答基准，并审计模型的参数知识暴露情况。在 27 个 LLM 上测试发现，单次检索在 40 种配置中的 38 种显著提升正确弃答率（CAR），而迭代 RAG 在 30 种配置中显著降低 CAR（均值 46.4%），答案准确率仅从 68.5% 变为 69.3%。

本事件热度走势

还没有足够的连续观测数据，暂不绘制趋势。