跳到正文
热点事件观察中

研究者提出双重稳健偏好优化算法

1 篇报道1 个报道来源2 天前更新

先了解这件事

AI 综述

Erhan Xu 等作者提出一种双重稳健偏好优化算法,用于大语言模型对齐中的偏好微调。针对 RLHF 中偏好模型、参考策略或奖励函数设定错误会导致微调效果不佳的问题,该算法在偏好模型或参考策略其中之一被正确设定时即可保持一致性,无需两者同时正确。 研究者称,该算法在理论与实验中均表现出优于现有 SOTA 算法的性能和稳健性;代码已公开,论文被 NeurIPS 2025 接收。

AI 根据报道生成 · 1 天前更新

报道时间线

沿着报道,了解事件的不同侧面。

10月28日
  1. arXiv cs.AI
    面向大语言模型的双重稳健对齐算法

    针对 RLHF 中偏好模型、参考策略或奖励函数易被错误设定导致微调效果不佳的问题,研究者提出一种双重稳健偏好优化算法,只要偏好模型或参考策略其中之一被正确设定即可保持一致性,无需两者同时正确。该算法在理论与实践中均表现出优于现有 SOTA 算法的性能和稳健性,代码已公开,论文被 NeurIPS 2025 接收。

本事件热度走势

可比范围当前
4
可比范围峰值
810月28日 22:00
近 24 小时变化
-51%

趋势仅比较持续完整观测到的相同主体,范围可能小于当前热度统计。移动指针或点击图表查看每小时热度;键盘可用左右方向键切换。