跳到正文
热点事件持续更新

研究:开启推理提升模型一致性,推理链更长反而跨模型更不一致

1 篇报道1 个报道来源9 小时前更新

先了解这件事

AI 综述

Mila Gorecki 与 Moritz Hardt 发表 arXiv 论文,区分“推理作为干预”与“推理作为可观察行为”,研究推理对语言模型预测一致性的影响。在来自两家开发者的九个模型和三个分类任务上,开启推理会提高模型对同一个体的预测一致性;但推理链更长的个体反而获得更不一致的跨模型预测。两种模式在控制准确率差异后依然成立。

AI 根据报道生成 · 1 小时前更新

报道时间线

沿着报道,了解事件的不同侧面。

11月2日
  1. arXiv cs.CY
    推理会让语言模型更一致吗?arXiv 研究区分“推理干预”与“推理行为”

    一项 arXiv 研究区分“推理作为干预”与“推理作为可观察行为”,在来自两家开发者的九个模型和三个分类任务上发现:开启推理会提高模型对同一个体的预测一致性,但推理链更长的个体反而获得更不一致的跨模型预测,两种模式在控制准确率差异后依然成立。

本事件热度走势

还没有足够的连续观测数据,暂不绘制趋势。