arXiv·· 12 天前AI 评分31
LLM 如何在噪声证据下推理？VisualNoiseQA 主动视觉推理基准
How Well Do LLMs Reason with Noisy Evidence? An Active Visual Reasoning Benchmark
AI 导读
研究者提出 VisualNoiseQA，一个面向噪声视觉反馈下主动推理的新基准：纯文本 LLM 需通过迭代查询固定的视觉工具来解决 VQA 问题，而反馈本身带有噪声与不确定性。现有主动推理基准大多假设环境反馈可信，或引入噪声却不提供显式、可校准的不确定性信号。
来源：arXiv · arxiv.org