Hugging Face Daily Papers· Nagham Omar·· 19 天前AI 评分26
研究：无关图像会干扰 VLM 评判，即使标注规则要求只看句子
It's Not What the Image Shows: Irrelevant Context Destabilises VLM Judges Without Informing Them
AI 导读
研究提出 MIST（Misleading-Image Stress Test）压力测试，包含 200 条英文句子，每条含一个可作比喻或字面理解的短语，并分别配对齐图像、误导性图像或无图像。标注规则要求仅凭句子判断答案，因此任何图像都不应改变结果，但实验显示无关图像会干扰 VLM 评判。
来源：Hugging Face Daily Papers · huggingface.co