跳到正文
arXiv·· 12 天前AI 评分36

统一多模态模型的视觉弃权能力:Draw-or-Decline 基准

Visual Abstention in Unified Multimodal Models

AI 导读

研究者提出 Draw-or-Decline(DoD)基准,用 7 类任务共 1,050 对可行-不可行请求,同时衡量统一多模态模型的编辑成功率与对不可行请求的拒绝能力。在 8 个统一多模态模型上的评测显示,模型在编辑任务上的表现与其对不可行请求的弃权行为存在明显脱节。

来源:arXiv · arxiv.org