研究揭示Best-of-N选择的尾部校准与奖励攻击
热点事件持续更新
研究揭示Best-of-N选择的尾部校准与奖励攻击
1 篇报道1 个报道来源11 小时前更新
先了解这件事
AI 综述
Cheng Gui等作者提交的论文证明,Best-of-N(BoN)推理的精确值可写成条件真实奖励在提示内分数分位数上的Beta加权积分,因此BoN只通过排名依赖分数,且只有在尾部校准曲线向下弯时才会下降。 在真实候选池上,尾部失效罕见,且全部出现在代码生成任务中。作者称,一个留出的尾部校准统计量能可靠预测交叉拟合预算上限在何处有帮助,效果与排名准确率相当,并与Soft-BoN基线具有竞争力。
AI 根据报道生成 · 1 小时前更新
最新进展10月27日 12:00
尾部校准揭示 Best-of-N 选择中的有限预算奖励攻击报道时间线
沿着报道,了解事件的不同侧面。
10月27日
- arXiv cs.CL尾部校准揭示 Best-of-N 选择中的有限预算奖励攻击
研究证明 Best-of-N(BoN)推理的精确值可表示为条件真实奖励在提示内分数分位数上的 Beta 加权积分,因此 BoN 仅通过排名依赖分数,且只有在尾部校准曲线向下弯时才会下降。在真实候选池上,尾部失效罕见且全部出现在代码生成任务中;一个留出的尾部校准统计量能可靠预测交叉拟合预算上限在何处有帮助,效果与排名准确率相当,并与 Soft-BoN 基线具有竞争力。
本事件热度走势
还没有足够的连续观测数据,暂不绘制趋势。