跳到正文
arXiv cs.CL· Letian Shi, Kanwal Mehreen, Deheng Zhang, Yuxia Wang·· 11 小时前AI 评分31

研究:共情并非模型事实性与可靠性下降的替罪羊

Empathy Is Not the Scapegoat for Declines in Factuality and Reliability

AI 导读

针对“更温暖的模型可靠性更低”的既有结论,该研究指出其并不完整:过往实验多在共情对话上训练,难以区分语气效应与 SFT 带来的分布偏移。作者从提示词、SFT 和 RL 三种方式诱导温暖行为,用 11 个数据集基准套件和情感语境下的 EMOFACT 评估能力保持情况,发现温暖效应因任务和模型而异,任务对齐的自适应语气可同时提升共情与特定可靠性,但仍存在部分能力权衡。研究还提出经人工验证的共情评估器。

正文 · AI 翻译

查看 PDF HTML(实验性)

摘要:语言模型日益被期望在压力或不确定的情境中为用户提供支持,此时温暖与共情是可取的。尽管近期研究将更温暖的模型与可靠性降低联系起来,但我们表明这一结论并不完整。先前的研究通常主要基于共情对话进行训练,这使得难以将语气效应与 SFT 引起的分布偏移区分开来。我们从模型和评估两个层面重新审视这一问题。我们研究了提示、SFT 和 RL 在诱导温暖行为方面的作用,并使用包含 11 个数据集的基准套件以及情感情境下的 EMOFACT 全面评估能力保持情况。在多个模型系列中,我们发现温暖效应因任务和模型而异,而与任务对齐的自适应语气可以提升共情和针对性可靠性,尽管仍存在一些能力权衡。我们进一步引入了经人工验证的共情评估器,专门用于评估共情式模型回复。我们的结果表明,模型可以在社交互动中提供更多支持,同时保持可靠性。
评论: 已被 AACL 2026 接收
主题: 计算与语言(cs.CL)
引用为: arXiv:2610.18541 [cs.CL]
  (或 arXiv:2610.18541v2 [cs.CL] 用于此版本)
  https://doi.org/10.48550/arXiv.2610.18541

由 DataCite 颁发的 arXiv DOI

提交历史

来自:Letian Shi [查看邮箱]
[v1] 2026年10月13日 星期二 15:20:46 UTC(160 KB)
[v2] 2026年11月2日 星期一 14:33:43 UTC(152 KB)

来源:arXiv cs.CL · arxiv.org