跳到正文
arXiv cs.CL· Yiheng Wang, Yueqian Lin, Lichen Zhu, Yudong Liu, Hai "Helen" Li, Yiran Chen·· 11 小时前AI 评分42

当没有正确答案时:诊断 MLLMs 在视频理解中的缺失答案检测能力

When No Answer Is Correct: Diagnosing Absent Answer Detection for MLLMs in Video Understanding

AI 导读

一项诊断性研究发现,多模态大语言模型(MLLMs)在视频理解中面对候选选项均不正确的情况时,绝大多数会挑选看似合理的干扰项,而非识别出“无正确答案”。该失败在时序推理任务中更明显,且随帧采样密度提高而加剧。思维链提示虽能显著提升检测率,但整体表现仍不理想,说明仅靠提示策略不足以解决这一系统性缺陷。

正文 · AI 翻译

查看 PDF HTML(实验性)

摘要:多模态大语言模型(MLLMs)在视频理解方面已取得实质性进展,但其回答的可靠性仍缺乏充分研究。本工作对 MLLMs 在视频理解中的缺失答案检测进行了一项诊断性研究,其中正确答案被有意排除在候选集之外,可靠的模型应能识别出不存在有效选项。我们在三种设置下评估缺失答案检测行为:带有“以上皆非”选项的多项选择题、带有检测指令的开放式生成,以及无任何引导的标准评估。在多种模型和基准上,我们发现 MLLMs 绝大多数情况下会选择看似合理的干扰项,而非检测出缺失答案。这一失败在时序推理任务中更为明显,且随着帧采样密度增加而加剧。我们进一步探索了思维链提示作为一种缓解策略,发现虽然它大幅提高了检测率,但性能仍不令人满意,这表明仅靠基于提示的策略不足以完全解决这一局限。这些发现揭示了缺失答案检测中的系统性失败,并凸显了在多模态系统中建立显式检测机制的必要性。
评论: 发表于 EMNLP 2026 会议论文
主题: 人工智能(cs.AI);计算与语言(cs.CL);计算机视觉与模式识别(cs.CV)
引用为: arXiv:2606.08239 [cs.AI]
  (或 arXiv:2606.08239v2 [cs.AI] 为本版本)
  https://doi.org/10.48550/arXiv.2606.08239

由 DataCite 颁发的 arXiv DOI

提交历史

来自:Yiheng Wang [查看邮箱]
[v1] 2026年6月6日星期六 15:51:25 UTC(581 KB)
[v2] 2026年11月2日星期一 03:48:28 UTC(587 KB)

来源:arXiv cs.CL · arxiv.org