跳到正文
10月15日周四
  1. arXiv cs.AI27

    Know-Thy-Not:双编码器视觉语言模型的无训练定向否定

    双编码器视觉语言模型在否定理解上系统性失败,对"没有狗的猫"和"有狗的猫"打分几乎相同,该问题源于单嵌入框架的固有缺陷。研究者提出无训练方法 Know-Thy-Not(KTN),在图像侧引入拒绝维度直接惩罚被否定概念,并发布首个需要真正拒绝才能通过的基准 COCO-Confusion。

  2. arXiv cs.AI22

    ReConV:用表示重建实现视觉 token 压缩

    研究者提出视觉 token 压缩框架 ReConV,用紧凑的 Summary Bank(SMB)汇总完整视觉序列,并依据重建残差保留 SMB 未能充分捕捉的 token,每个压缩层由轻量位置条件解码器重建当前 token。在 ImageNet 上,ReConV 以少 48% GMACs 超过未压缩基线,并支持可复用的图像级表示以加速多轮推理。代码已发布于 TokenDrop。

  3. arXiv cs.AI20

    用 LLM 在下载前预筛视频:面向低成本视频数据集构建

    研究提出在下载视频前用 LLM 基于元数据预筛候选视频,以降低存储、时间和标注成本。LLM 预筛以四名独立标注者的严格多数投票为基准,并用 Gwet's AC1 验证标注可靠性,同时与两种关键词启发式基线对比。团队通过 LOO 与 AORI 机制评估 LLM 作为虚拟标注者的表现,并报告了相对现有方法的成本对比,实现已在 GitHub 开源。

  4. arXiv cs.AI27

    ProAda:面向视觉语言模型的提示词自适应对抗图像

    针对现有视觉语言模型对抗图像"提示词无关"、会无差别拒绝所有提问的问题,研究者提出 ProAda 对抗图像,通过迭代更新文本提示词并配合分类器判断其危害性,以更精准地优化对抗方向。在视觉隐私相关数据集上,ProAda 能拒绝超过 90% 的有害提示词,同时放行超过 90% 的合法提示词,整体表现优于现有提示词无关方法,并具备有竞争力的跨模型迁移性和更强的抗反制鲁棒性。

  5. arXiv cs.AI20

    面向模态无关的癫痫发作分类:统一 EEG 与 iEEG 信号的深度学习框架

    研究者提出统一多模态信号协调框架 UMSH,将不同受试者与来源的异构 EEG 和 iEEG 记录整合进同一癫痫发作分类流程,并用基于 cGAN 的数据增强缓解类别极度不平衡。该框架以 EEGNet-ViT 作为特征提取与分类网络,同时学习局部判别模式与全局上下文信息,实验验证了其在鲁棒癫痫分类上的有效性。

  6. arXiv cs.AI22

    VisExMEM:基于视觉证据的可解释多模态评估指标

    研究者提出无参考评估器 VisExMEM,将图像描述拆解为原子断言、定位视觉证据并逐条验证,再平均为全局分数。基于 Qwen3.5 训练的 4B 和 9B 模型在八个基准上,VisExMEM-9B 的描述性综合分超过 VQAScore 11.7 分,与 GPT-5.6 Sol 保持竞争力。团队同时发布含 600 个人工标注图文对和 8.7K 原子断言的 AGITA-Bench。

  7. arXiv cs.AI20

    FlexLMV-Net:显式对齐的多视角乳腺癌风险预测框架

    FlexLMV-Net 是一个乳腺级别的纵向多视角框架,可联合建模 CC 与 MLO 视角并显式对齐纵向特征图,支持可变数量的历史筛查检查。在 EMBED 和 CSAW-CC 数据集上,该模型在乳腺密度、癌症亚型及人口统计亚组上均优于现有方法。研究同时开源了统一单/多时间点风险预测模型预处理、训练、推理与评估协议的基准。

  8. arXiv cs.AI29

    EventLens:面向视频理解的事件结构强化学习框架

    EventLens 是一个以视觉为中心的强化学习框架,通过事件结构恢复来训练视频理解,涵盖事件分割、进程判别和多事件关系推理三类可验证任务,并可用确定性奖励进行 GRPO 训练。在 Qwen3-VL 骨干上,该方法在时间定位与事件敏感推理基准上取得一致提升,同时保持通用视频问答性能。研究还提出多教师在线策略蒸馏(MT-OPD)将多个专用策略整合为统一模型,训练成本显著低于直接混合 RL 优化。

  9. arXiv cs.AI36

    Unravel:从单张图像重建可交互 3D 场景

    Unravel 是一个免训练框架,能把单张图像转成每个物体都可独立移动的交互式 3D 场景。它先用视觉语言模型规划可见物体、由图像编辑器逐层移除并修复遮挡区域,再按移除的逆序重建场景,并以点云作为空间关系恢复的主要模态。在多种室内场景实验中,Unravel 比现有方法恢复出更多物体、摆放更忠实,场景物理合理性也更高。

  10. arXiv cs.AI31

    Gen Through the Lens:跨坐标系条件融合的相机可控视频生成

    Gen Through the Lens 是一个相机可控的图像到视频生成框架,通过跨坐标系条件融合,将相机坐标(内参)、世界坐标(空间几何提示)和物体坐标(目标主体的 3D 边界框)三类异构控制信号统一起来,实现对相机运动、对焦和构图的精确控制,同时保持时空一致性。实验表明,该方法在多种相机操作下均能生成可控且视觉一致的结果,在真实感和可编辑性上优于现有方法。

  11. arXiv cs.AI22

    L2T:多模态推理中自适应决定“看什么”与“想多久”

    针对现有多模态大模型快慢推理只调控文本推理长度、忽视视觉计算的问题,研究者提出统一推理框架 L2T,将工具产生的视觉状态离散化为视觉 token,使视觉感知与文本推理进入同一自回归空间。L2T 引入模态感知路由奖励选择推理模式,并用难度感知快慢策略按任务复杂度调整推理深度。在通用感知与推理密集任务上,L2T 相比显式工具调用方法保持有竞争力性能,吞吐量提升 1.7–3.6 倍。

  12. arXiv cs.AI22

    重新思考人类意图到 CAD:通过协同多任务对齐与空间感知强化学习生成参数化 CAD 模型

    研究提出 HiCAD 两阶段框架,直接将手绘草图和文本描述等多层级人类意图映射为可执行的参数化 CAD 代码,无需预先存在目标 CAD 模型。该框架通过协同多任务对齐弥合异构输入的表示差距,并用空间感知强化学习保证几何与拓扑一致性,同时构建了首个对齐手绘草图、文本描述与参数化 CAD 代码的大规模数据集 HiCAD。实验表明该方法在多项任务上显著优于现有基线,论文已被 ICML 2026 接收。

  13. arXiv cs.AI32

    TARA:跨视角与时间的轨迹泛化物理攻击,可持续干扰世界模型与视频理解模型

    研究者提出轨迹感知对抗对齐与精炼攻击 TARA,用轨迹感知优化与对比对齐生成单一可打印对抗纹理,在 EPIC-KITCHENS-100 和 Something-Something V2 上跨视角、跨时间持续误导世界模型与视频理解模型。团队还构建了几何跟踪流水线并采集真实打印-重拍视频,形成可复现测试平台。

  14. arXiv cs.AI38

    EvolvAttack:对自进化 VLM 智能体的后门攻击

    研究者提出 EvolvAttack,一种针对自进化 VLM 智能体的"自进化后门"攻击:恶意载荷在初始智能体中休眠,随记忆演化逐步激活。该攻击需视觉触发器与足够演化的记忆状态同时满足,静态扫描干净记忆时攻击成功率近乎为零。在三种 VLM 主干、四种智能体流程及三类记忆演化机制下,攻击在演化前成功率仅 0.5%,100 次交互内超过 95%,且保持正常功能。

  15. arXiv cs.AI22

    用预拟合与冻结的 Transformer 评分器替代多模态对比学习中的手工相似度函数

    研究者提出 Prior-Fitted Scorer(PFS),用 Transformer 充当多模态对比学习的评分器,并先在由结构因果模型(SCM)先验生成的合成多模态数据上预训练,再迁移到真实数据。在四个真实数据集上,冻结的随机初始化 Transformer 评分器即可媲美强手工对比基线,而先验拟合进一步优于随机初始化;将评分器与编码器联合优化反而效果更差。

  16. arXiv cs.AI24

    AlignAudio:面向噪声鲁棒语音条件生成的双对齐统一框架

    AlignAudio 是一个基于双重对齐的噪声鲁棒语音条件生成框架,通过对齐干净与含噪语音的表示保留语义线索,并在 flow matching 范式内强化生成级一致性。在语音到音频(STA)和语音转换(VC)任务上,它在干净语音下性能与基线相当,在多种噪声条件下显著优于基线。该双对齐策略适用于单流与多流语音条件,并可集成到不同的 flow matching 生成框架与后训练设置中。

  17. arXiv cs.AI23

    NeST-Bayes:多机器人系统中联合推断机器人与物体假设信任的神经符号框架

    NeST-Bayes 是一个神经符号框架,仅凭机器人间观测一致性即可联合推断机器人与物体假设的信任度,无需预设信任关系、声誉信息或侧信道身份信号。它通过自我中心关系图推理出瞬时信任证据分数,并用 Beta 分布信任信念的贝叶斯更新实现时序一致的信任估计。

  18. arXiv cs.AI27

    GeoFix:用单一几何奖励修复 4D 生成一致性

    GeoFix 是一个统一框架,仅用单一几何奖励即可提升 4D 生成的几何一致性与视觉质量,适用于训练和推理阶段的奖励对齐。该奖励通过校准相机视场重叠带来的偏差,衡量静态场景区域的跨视角深度一致性,避免约束外观或惩罚合理物体运动。结果显示,WorldScore 3D 一致性提升 39%,VBench Quality Score 提升 4%。

  19. arXiv cs.AI41

    面向 GUI 智能体的潜在世界动作模型

    研究提出面向 GUI 智能体的潜在世界动作模型,将预测目标从全屏像素重建转为潜在空间中动作引发的未来信息,用一个大模型共享表示驱动动作选择与转移预测两个专用头,并引入动作感知对比目标缓解身份捷径问题。在离线与在线 GUI 设置中,该方法成功率相对像素空间世界模型分别最高提升 31.9% 和 40.6%,推理延迟最高降低 98.9%。

  20. arXiv cs.AI26

    CAPTOR:面向胸腹盆肿瘤 CT 的视觉-语言基础模型

    研究团队开发并评估了视觉-语言基础模型 CAPTOR,用于肿瘤胸腹盆(CAP)CT 解读,训练与测试分别使用 25,512 和 10,794 对 CT-报告数据。在分类任务上,CAPTOR 在 CAP 子集取得 AUC 0.767,优于次优模型的 0.695(p<0.001),并在四项肿瘤预后基准中三项排名第一,检索性能同样领先。团队已开源预处理、训练与推理代码及模型权重。

  21. arXiv cs.AI22

    LMM 能否"看懂"多面板科学图表?一个面向大语言模型图表分析的多面板视觉问答数据集

    研究者构建了一个面向 LLM/LMM 图表分析的多面板视觉问答数据集,用合成但逼真的单面板与多面板科学图表,按四级描述模型设计从概念问答到解释性分析的 VQA 任务。测试发现,随着面板数量、图表元素数量和问题难度增加,LMM 准确率下降;分析还引入成本相对性能作为指标。问答对、随机图表生成代码及图表元素 bounding-box 元数据均已公开。

  22. arXiv cs.AI12

    超越门控权重:RCC 分类中影像组学-图像特征融合的决策级解释

    研究在固定的 3D MedVAE-影像组学模型中发现,门控系数无法反映分支对分类器输出的实际贡献:平均结构影像组学权重为 0.823,而平均有效影像组学主导度仅 0.148,两者案例级关联较弱(ρ = 0.290)。门控图像项保留的判别排序信息明显强于直接影像组学项,且由于影像组学同时生成门控,加性分支贡献不应被解读为总输入影响。该研究提示结构门控权重与决策级分支贡献应分开解释。

  23. arXiv cs.AI15

    肾细胞癌分类中放射组学-图像融合的概率校准评估

    研究基于 KiTS23 数据集的 396 名患者,评估在四类图像模型中引入放射组学后概率预测质量的变化。在 12 组匹配对比中,AUC 和 AP 全部提升,Brier score 与 NLL 在 11 组改善,ECE 在 8 组改善;3D MedVAE 门控融合模型表现最佳。对拼接、交叉注意力和门控融合做概率平均,可在全部四类架构上同时改善区分度与校准。