SAVeR²:用可验证奖励对齐推理模型安全
热点事件持续更新
SAVeR²:用可验证奖励对齐推理模型安全
1 篇报道1 个报道来源10 小时前更新
先了解这件事
AI 综述
Yichen Sun 等作者提出安全对齐方法 SAVeR²,用四项细粒度可验证奖励信号和难度感知数据选择策略稳定训练,并以保推理梯度投影机制处理安全与推理梯度的冲突。作者称,在 1.5B 至 671B 参数规模的模型上,该方法在多个 benchmark 中安全表现更优、过度拒答率显著降低,且不损害通用推理能力。 该方法针对的是大推理模型的安全对齐:试图在提升安全性的同时避免削弱推理能力,即消除所谓“安全税”。上述效果均为论文作者的表述。
AI 根据报道生成 · 2 小时前更新
最新进展11月6日 13:00
SAVeR²:基于可验证奖励的推理型安全对齐方法,消除大推理模型的“安全税”报道时间线
沿着报道,了解事件的不同侧面。
11月6日
- arXiv cs.AISAVeR²:基于可验证奖励的推理型安全对齐方法,消除大推理模型的“安全税”
SAVeR² 是一种面向大推理模型(LRM)的安全对齐方法,通过四项细粒度可验证奖励信号与难度感知数据选择策略稳定训练,并用保推理梯度投影机制解析安全与推理梯度的冲突。在 1.5B 至 671B 参数规模的模型上,该方法在多个 benchmark 中取得更优安全表现、显著降低过度拒答率,且不损害通用推理能力。
本事件热度走势
还没有足够的连续观测数据,暂不绘制趋势。