跳到正文
arXiv·· 14 天前AI 评分32

LLM 事实核查没有后见之明:测量虚假信息检测中的泄漏通道

No Hindsight for LLM Fact-Checkers: Measuring Leakage Channels in Misinformation Detection

AI 导读

研究在 AVeriTeC 和 QuanTemp++ 上测量 LLM 事实核查的两类泄漏通道:预训练中记忆的结果信息,以及声明发布后才出现的检索证据。通过重建时点证据条件并探测模型表征中编码的结果信息,研究发现存在大量泄漏证据,而标准基准很少区分这两类通道。

来源:arXiv · arxiv.org