研究者提出免训练单次前向的注意力空间对比引导方法

Yujin Jo、Sangyoon Bae 与 Taesup Kim 提出 Attention-space Contrastive Guidance（ACG），一种面向大型视觉语言模型（LVLM）的幻觉缓解方法。据其论文，该方法无需训练、只需单次前向，直接在自注意力层内操作，因为作者认为幻觉诱导的跨模态偏置正是在该层出现。 其做法是构建图像条件与近似纯文本两条注意力路径，再施加轻量正交投影，以抑制纯文本偏置。论文称由此实现高效幻觉缓解，但报道未给出与其他方法对比的量化效果。

AI 根据报道生成 · 50 分钟前更新

还没有足够的连续观测数据，暂不绘制趋势。