研究:辅助轨迹偏好提升小模型自我改进
热点事件观察中
研究:辅助轨迹偏好提升小模型自我改进
1 篇报道1 个报道来源1 天前更新
先了解这件事
AI 综述
Minju Gwak 与 Alan Ritter 发表研究,考察在有限监督下,辅助轨迹偏好能否提升小语言模型的自我改进与迁移能力。其做法是用辅助轨迹偏好区分结果同样正确的推理轨迹,让模型从已验证的推理轨迹中学习。 研究称,在线实验中基于熵的 UID-Conj. 指标在 Qwen3-1.7B 上适配于 30 道无参考答案的 AIME 题;这是该指标在该设定下的适配结果,并非已证实的普遍提升效果。
AI 根据报道生成 · 48 分钟前更新
最新进展11月2日 13:00
辅助奖励驱动的自我改进:从已验证推理轨迹中学习并评估迁移效果报道时间线
沿着报道,了解事件的不同侧面。
11月2日
- arXiv cs.AI辅助奖励驱动的自我改进:从已验证推理轨迹中学习并评估迁移效果
研究提出用辅助轨迹偏好区分结果同样正确的推理轨迹,以提升小模型在有限监督下的自我改进与迁移能力。在线实验中,基于熵的 UID-Conj. 指标在 Qwen3-1.7B 上于 30 道无参考答案的 AIME 题上适配。
本事件热度走势
还没有足够的连续观测数据,暂不绘制趋势。