跳到正文
RadarAI· X:Rohan Paul (@rohanpaul_ai)·· 5 小时前AI 评分52

研究:LLM 道德选择缺乏稳定价值排序

AI 导读

一项论文发现,LLM 的道德选择往往缺乏稳定的价值排序,对答案取平均会造出虚假的、类人的道德层级。研究者让包括 GPT-5.2、Gemini、DeepSeek 在内的 5 个 LLM 对成对道德违规行为做比较,并直接从 next-token 输出读取概率;调换两个选项的顺序后,30 个测试块中有 26 个的排序发生变化。

正文 · AI 翻译

Rohan Paul· @rohanpaul_ai · X·2026-11-11 12:08· 14 分钟前AI 评分47

AI 导读

一项论文发现,LLM 的道德选择往往缺乏稳定的价值排序,对答案取平均会造出虚假的、类人的道德层级。研究者让包括 GPT-5.2、Gemini、DeepSeek 在内的 5 个 LLM 对成对道德违规行为做比较,并直接从 next-token 输出读取概率。

正文 · 原文

该论文发现,LLM 的道德选择往往缺乏稳定的价值排序,对其答案取平均会造出一个虚假的、类人的道德层级。

许多研究得出结论认为,LLM 持有合理的道德价值观,因为它们在道德测试中表现良好。但好的答案并不能表明模型会在相互竞争的价值之间进行权衡。

研究者向包括 GPT-5.2、Gemini 和 DeepSeek 在内的 5 个 LLM 提供了成对的道德违规行为,并询问哪一个更恶劣。他们直接从模型的 next-token 输出中读取每个答案的概率,然后检验这些选择是否符合一致的排序。

在 30 个测试区块中,有 26 个在调换两个选项的顺序后排序发生了变化。取平均后,5 个模型中有 4 个呈现出清晰、几乎相同的排序,而这一排序与任何单个测试集都不匹配。

在信任模型的道德对齐分数之前,请检查其选择在单个提示词和两种答案顺序下是否保持一致的排序,且不进行平均。

来源:Rohan Paul · x.com

来源:RadarAI · aihot.news