跳到正文
热点事件观察中

OpenAI 研究 CoT 可监控性生命周期变化

1 篇报道1 个报道来源1 天前更新

先了解这件事

AI 综述

OpenAI 对齐研究博客发布研究,沿预训练、架构、强化学习和模型生成数据四个环节,分析模型生命周期中 CoT 可监控性(无 CoT 能力与 CoT 可控性)的变化。 OpenAI 称,基础模型困惑度下降会稳定提升无 CoT 能力;强化学习即使没有过程监督也会提高 CoT 可控性;CoT 可控性还能通过 SFT 训练数据从教师模型传递给学生模型。

AI 根据报道生成 · 1 小时前更新

报道时间线

沿着报道,了解事件的不同侧面。

11月10日
  1. OpenAI Alignment 研究博客精选
    OpenAI 研究:模型生命周期中哪些因素影响 CoT 可监控性

    OpenAI 对齐研究博客发布研究,沿预训练、架构、强化学习和模型生成数据四个环节分析 CoT 可监控性的变化。研究发现,基础模型困惑度下降会稳定提升无 CoT 能力,强化学习即使没有过程监督也会提高 CoT 可控性,而 CoT 可控性还能通过 SFT 训练数据从教师模型传递给学生模型。

本事件热度走势

还没有足够的连续观测数据,暂不绘制趋势。