StableJudge:面向 LLM-as-a-Judge 的轻量级对抗防御框架
StableJudge 是一个将提示注入缓解外置为可复用评分前能力的轻量级防御框架,核心是 0.13B 的 Sentry 组件,可在评估前定位被注入的文本片段并做定向清洗。该框架用对抗性演化攻击训练,并从评委模型的输出分布中导出确定性的细粒度标量分数。在留出科学摘要和分布外攻击变体上,StableJudge 提升了受攻击时的分数恢复能力,同时基本保持通用性能,代码与数据将开源。
StableJudge 是一个将提示注入缓解外置为可复用评分前能力的轻量级防御框架,核心是 0.13B 的 Sentry 组件,可在评估前定位被注入的文本片段并做定向清洗。该框架用对抗性演化攻击训练,并从评委模型的输出分布中导出确定性的细粒度标量分数。在留出科学摘要和分布外攻击变体上,StableJudge 提升了受攻击时的分数恢复能力,同时基本保持通用性能,代码与数据将开源。
研究揭示语言模型 API 在浮点偏置加法中存在数值侧信道,仅凭 token 身份即可区分具有相同完整未扰动对数概率的分数向量。该方法利用二进制指数边界处可表示间距的变化,在 binary32 算术假设下最多用 52 次 token 查询即可精确恢复一对 logit 及其未知的平局优先顺序。
InfoVis 是一个统一的 9B 幻灯片生成与编辑模型,基于 FLUX.2-klein-base-9B 做幻灯片专项后训练,在 VisSlideBench 上以 7.94 总分领先所有参评开源模型,接近 Nano-Banana-2 的 7.99。
PrivacyGuard 用源关联脱敏(SAN)和结构化引用生命周期(REF)解决云端 GUI 智能体的隐私引用问题,在四组 reader–language 组合中把审计到的源值泄漏相对最接近的完整流水线系统降低 33.55%–82.60%。
研究者提出 TabWM(Tabular World Model)与 WorldRel 世界生成器,让模型无需更新参数、仅以观测执行序列为上下文,即可预测新动作引发的稀疏结构化编辑。在 512 个留出世界上,完整编辑 F1 从无观测执行时的 0.016 提升至 64 次执行时的 0.685。由于预测结果是显式关系编辑,可递归推演候选未来并比较动作,更广的搜索提升了所选动作序列的实际回报。
一项 arXiv 研究在注意力汇形成前约两到三层处发现隐藏状态的短程谱重组信号,该信号在 Qwen2.5、GLM-Z1 和 GPT-OSS 中均可预测后续汇的形成。研究者仅修改当前注意力计算后隐藏状态的奇异值,即可相对范数匹配的随机谱扰动改变后续汇行为;在 Qwen2.5 中,抑制效应伴随下一层对位置 0 的 query-key 偏好下降。
VAttnPO 用答案条件下的视觉注意力细化 token 级信用,同时保留验证器给出的轨迹平均优势,在视觉注意力空间以 Jensen-Shannon 散度衡量新旧策略一致性。
研究提出 Distill-SFT 方法,将答案与推理依据合并为单一训练目标,在巴西葡萄牙语住院医师考试题上仅用更少训练样本,就在此前推理答错的题目上略优于逐步蒸馏。
研究者提出 CB-RBM,将属性图中节点特征与邻域聚合特征的一致性形式化为 Context Boost(CB)分数,在受限玻尔兹曼机框架下实现无标签对抗检测。
DFK-Former 是一种集合到场的 Transformer,可从稀疏、含噪且不规则采样的三维观测中重建无散度速度场,并直接预测无散度核表示参数,单次前向即满足不可压缩性。相比逐场无散度核优化,其端点误差最多降低 4.6 倍,单场重建耗时 7.5 ms 而非 9.8 s,提速超过三个数量级。研究还引入自适应各向异性无散度核,并在真实 DNS 湍流数据上完成迁移验证。
SuPER-Mamba 是一个免训练框架,利用 Surprisal 作为模型内在信号,为预训练 Mamba 模型做长程状态路由,通过 Local Pooling 聚合邻近响应并优先更新 Global-Channel,无需查询相关打分或额外训练。
REEL 是一个通用视觉记忆规划器,通过统一工具接口学习检索参考、生成缺失视觉证据并更新持久记忆,配合后端专用适配器可将同一策略用于不同黑盒视频生成器。训练分三阶段:监督微调、单镜头 GRPO 和多镜头 GRPO,后者跨连续镜头传递策略生成的记忆。
AeroChem 是一个闭环物理信息状态空间框架,用于化学反应性空气质量预报,采用 UDE 过程分支与 Mamba 虚拟测量分支的双分支协同校正设计,并通过 Neural Kalman Fusion 在每步预报中校正潜物理状态并反馈回模拟器,以缓解长时程漂移。
针对现有视觉语言模型对抗图像"提示词无关"、会无差别拒绝所有提问的问题,研究者提出 ProAda 对抗图像,通过迭代更新文本提示词并配合分类器判断其危害性,以更精准地优化对抗方向。在视觉隐私相关数据集上,ProAda 能拒绝超过 90% 的有害提示词,同时放行超过 90% 的合法提示词,整体表现优于现有提示词无关方法,并具备有竞争力的跨模型迁移性和更强的抗反制鲁棒性。
MixLID 是一个支持 111 种语言-文字组合的 token 级语言识别模型,采用两阶段训练:先用语料中的单语标签学习区分各语言,再在混合语言数据上继续训练,第二阶段数据由现有语码转换样本与基于英文源词和借词对应关系做词替换生成的增强样本拼接而成。
研究者提出统一多模态信号协调框架 UMSH,将不同受试者与来源的异构 EEG 和 iEEG 记录整合进同一癫痫发作分类流程,并用基于 cGAN 的数据增强缓解类别极度不平衡。该框架以 EEGNet-ViT 作为特征提取与分类网络,同时学习局部判别模式与全局上下文信息,实验验证了其在鲁棒癫痫分类上的有效性。
研究团队提出诊断框架 VLA-GAUGE,在统一可执行任务表示下评估 12 个视觉-语言-动作(VLA)模型的零样本泛化与扰动鲁棒性。结果显示平均 Zero-Shot Score 仅 22.3%,SimpleVLA-RL 仅 8.0% 位列倒数第二;三种组合扰动配置下平均 R-Score 为 9.3。
AlignCache 是一个闭环缓存框架,通过阶段自适应预算路由、闭环阈值校准和动量增强草稿合成三个组件,将视频扩散模型的缓存调度从静态风险累积转变为反馈驱动的自校正控制器。该方法针对现有自适应缓存依赖启发式差异度量、单一全局阈值且从不校验预算估计的问题,在多个 SOTA 视频生成模型上取得更优的加速-质量权衡,代码已开源。
PatTransBench 是一个包含 12,000 条中英/日/韩专利机器翻译(PatMT)评测基准,含 6,000 条短文本与 6,000 条长文本句对,按 IPC 分层采样并覆盖三个语对的双向翻译。
pi-Net 是一种物理信息潜变量模型,通过编码器将输入映射到物理归一化潜空间,再由可微物理头解码输出,用于解决将量纲分析引入有向计算图时产生的欠定系统问题。在数据稀缺的 GMAW 案例中,仅用 60 个实验样本即达到 R2 0.864,显著优于纯数据驱动基线,并提供因果、过程级的可解释性。
研究基于类 Twitter 的生成式社会模拟平台,用 ANES 数据构建 LLM 智能体人格,并消融情感极化标记、党派认同与投票选择三层党派身份。结果显示,仅移除少数明确党派表述,网络就从近乎完全隔离转为接近真实 Twitter 的跨党联系。作者认为匹配单一结果不足以证明行为效度,并指出问卷对所有议题一视同仁、人格构建将每个回答变成直接行为指令,可能是关键原因。
研究者提出 Speculative Recursive Self-Improvement(SpecRSI),在智能体前代版本尚未完全评估前就起草可执行的后续智能体,但采用前必须完成验证。
GrowRL 是一种通过结构生长把强化学习更新组织为紧凑计算通路的 RL 方法:冻结预训练主干,在每层 Transformer 新增独立的因果注意力分支和前馈网络分支,仅更新这些新增通路。
研究者提出 Spectrum-Aware Latent Expert Merging(SLEM),一种无需校准数据的专家合并框架,在 VAE 构建的专家权重结构化潜表示中完成合并。
PatMT2 用两阶段 LoRA 流程将专用翻译模型 Hy-MT2-7B 适配到中英日韩四语专利翻译,在六个翻译方向上 Stage-2 checkpoint 的宏平均 BLEU 达 43.39(BF16)至 43.57(AWQ INT4),较 Hy-MT2-7B 基线最高提升 +8.8 BLEU,并超过 Qwen3-32B 及若干外部系统。
StructZO 是一个结构化零阶优化框架,通过在激活诱导的信息子空间内进行大查询 ZO 估计并施加谱控制,将有效 ZO 估计维度从 mn 降至 mr。在 OPT 系列和 Llama3.1-8B 上,它平均相对最强 ZO 基线提升最高 8.7%,单项任务最高 26.9%,与一阶 Adam 平均差距在 1.5% 以内。
研究者提出 CryptoFlowBench,一个基于权威加密货币非法事件报告构建的基准,包含从局部到多跳资金追踪的四项任务,现有学习和启发式方法在这些任务上均面临显著挑战。同时提出图工具增强的智能体 ChainSleuth,通过迭代推理、调用图工具并更新追踪轨迹,实现自适应信息获取与错误路径恢复。实验显示没有基线能在四项任务上全面占优,ChainSleuth 在多跳任务上取得明显提升。
研究者提出无参考评估器 VisExMEM,将图像描述拆解为原子断言、定位视觉证据并逐条验证,再平均为全局分数。基于 Qwen3.5 训练的 4B 和 9B 模型在八个基准上,VisExMEM-9B 的描述性综合分超过 VQAScore 11.7 分,与 GPT-5.6 Sol 保持竞争力。团队同时发布含 600 个人工标注图文对和 8.7K 原子断言的 AGITA-Bench。
ARMED 是一个自适应临床 RAG 框架,可根据检索充分性和当次就诊相关性动态扩展检索,在证据不足时选择性执行补充或回退多查询检索。该框架引入相关性门控,仅激活临床相关的同一患者病史,并将证据组织为结构化的查询级临床证据。在 MIMIC-IV 上的实验表明,ARMED 持续优于此前的静态检索基线,并提升药物推荐质量;它结合本地可运行的小语言模型,无需依赖外部语言模型 API 或任务特定微调。
一项研究用因果模型估计走廊人机交互中社交导航信号是否真正提升通行成功率。研究将交互建模为包含机器人动作、行人占用、可用空间、任务结果和静态障碍物混杂因子的因果 DAG,结果显示仅基于观测的估计会错误地认为该信号有害,而因果估计表明其有益。
LoopQuant 是面向循环语言模型(LoopLM)的循环感知训练后量化(PTQ)框架,通过 CLDC、ILPA、LCTC 三个组件解决跨循环激活动态与递归误差传播问题。在 Ouro-2.6B 上,其 W4A4 精度超过所有 W4A8 基线,模型内存减少 65.3%,相比朴素 INT4 仅增加 3.4% 存储开销,解码速度较 BF16 提升 1.7 倍。代码已开源。
研究用监督变分自编码器(SVAE)从 787 名 15-25 岁青年的 DWI 结构连接组中提取潜空间特征,覆盖 82 个 Desikan-Killiany 图谱 ROI,用于性别分类。将 SVAE 学到的潜空间特征输入多种机器学习模型后,多层感知机取得最高 80% 的分类准确率。该工作展示了 DWI 脑连接组与深度学习区分性别的潜力,并为未来纳入跨性别个体的多样化人群研究铺路。
研究者提出 Boundary Proximity Index(BPI)分析框架,用于评估 Forward-Forward 学习及其变体在分类准确率之外的表现。实验发现,未训练的卷积神经网络线性探针准确率已远超随机水平,而靠近决策边界的误分类样本比深陷错误决策区域的样本更容易被"拯救"。该框架在七种 Forward-Forward 变体上验证,揭示了不同方法在拯救深度嵌入错误区域样本上的显著差异。
WorldRoPE 是一种面向多视图注意力的概率式世界中心 RoPE,将每个 patch token 反投影为共享世界坐标系下的一组体积高斯原语,以联合建模深度假设、深度不确定性与 patch 视锥的空间范围。
BAT3R 是一个免训练的贝叶斯自适应框架,通过状态创新门控(SIG)和贝叶斯引导自适应状态更新(BASU)两个模块,缓解流式 3D 重建在长序列中的误差累积。
FlexLMV-Net 是一个乳腺级别的纵向多视角框架,可联合建模 CC 与 MLO 视角并显式对齐纵向特征图,支持可变数量的历史筛查检查。在 EMBED 和 CSAW-CC 数据集上,该模型在乳腺密度、癌症亚型及人口统计亚组上均优于现有方法。研究同时开源了统一单/多时间点风险预测模型预处理、训练、推理与评估协议的基准。
BehaviorFormer 将下一 token 预测 Transformer 与深度聚类算法 DCSS 结合,在 26 名玩家的受控 Minecraft 会话中发现 23 种可跨玩家泛化的行为模式,并归为 stationary、roaming、travel、mining、base work、logging、farming 七类可解释类别。
SLDBench v2 将缩放定律发现场景从 8 个扩展到 127 个,覆盖语言模型预训练、下游性能和视觉语言迁移,并从中选出 30 个参考幂律拟合 R² ≤ 0.8 的挑战场景。
一篇发表于 TMLR 2026 的 52 页综述系统梳理了强化学习中的流匹配(Flow Matching)方法。该综述沿两个维度组织文献:所建模的目标分布(动作策略、价值评论家、转移动态)与 RL 信号的整合机制(能量加权回归、基于流的策略梯度、组相对策略优化),并对比了高斯与扩散基线,覆盖离散及非欧几里得动作空间等前沿方向。
针对深度搜索智能体蒸馏中"教师对某些实体过于熟悉导致监督信号偏弱"的问题,论文提出轻量门控信号 SEF,在实体入图前直接询问教师是否熟悉该实体。