MuPHI基准揭示视觉语言模型组合危害推理缺陷
热点事件持续更新
MuPHI基准揭示视觉语言模型组合危害推理缺陷
1 篇报道1 个报道来源10 小时前更新
先了解这件事
AI 综述
Anisha Saha等作者提出多模态隐式危害诊断基准MuPHI,专门考察图像与文本单独无害、组合后才产生有害性的跨模态推理。该基准发现,视觉语言模型能识别各模态证据,却无法将其绑定为有害机制。 基于这一缺陷,作者提出组合危害解释学习方法CHIL,不再只优化预测标签,而是奖励证据识别、跨模态绑定与判定一致性。据作者报告,CHIL在81%的OOD迁移评测上平均提升+2.5 macro-F1,反事实翻转率最高提升+3.8和+5.4个百分点。
AI 根据报道生成 · 50 分钟前更新
最新进展10月19日 12:00
MuPHI 基准揭示视觉语言模型组合式有害性推理缺陷,CHIL 方法提升 OOD 泛化报道时间线
沿着报道,了解事件的不同侧面。
10月19日
- arXiv cs.AIMuPHI 基准揭示视觉语言模型组合式有害性推理缺陷,CHIL 方法提升 OOD 泛化
研究者提出 MuPHI 诊断基准,专门考察图像与文本单独无害、组合后才产生有害性的跨模态推理,发现视觉语言模型能识别各模态证据,却无法将其绑定为有害机制。基于此提出的 CHIL 方法不再只优化预测标签,而是奖励证据识别、跨模态绑定与判定一致性,在 81% 的 OOD 迁移评测上平均提升 +2.5 macro-F1,反事实翻转率最高提升 +3.8 和 +5.4 个百分点。
本事件热度走势
还没有足够的连续观测数据,暂不绘制趋势。