超越文化人格偏差:以响应几何衡量语言模型与人类
研究提出用响应几何(各维度间相关矩阵构成的对称正定矩阵)衡量语言模型与人类的文化偏好。在 DeepSeek-V3 和 GPT-4o 中,固定题目顺序时提示的文化人格在 Big Five 得分和响应几何两个层面均显现;随机化题目顺序后响应几何降至随机水平,Big Five 仍能以 95%–97% 区分两种人格。
研究提出用响应几何(各维度间相关矩阵构成的对称正定矩阵)衡量语言模型与人类的文化偏好。在 DeepSeek-V3 和 GPT-4o 中,固定题目顺序时提示的文化人格在 Big Five 得分和响应几何两个层面均显现;随机化题目顺序后响应几何降至随机水平,Big Five 仍能以 95%–97% 区分两种人格。
研究者提出轻量优化器 Ember,专用于 embedding 与 LM-head 矩阵,优化器显存占用为 O(V + D),而非 Adam 的 O(2VD),且无需对 token 表优化器状态做分片。
研究提出椭圆前向扩展和视野(field of view)两项通用技术,在保持最优性的前提下加速任意角度路径规划,并据此开发了静态环境的 Zeta* 与动态环境的 Zeta*-SIPP。Zeta* 结合前向扫描后性能与当前最优算法 Anya 相当,且更易扩展;Zeta*-SIPP 在基准测试中相比最优规划器 TO-AA-SIPP 实现超过一个数量级的加速。
研究者提出元认知反馈强化学习(RLMF),依据模型对自身表现的自我判断质量来优化偏好训练中的补全排序,并配合元认知数据选择筛选高价值训练样本。在忠实校准任务上,RLMF 在多种任务上取得可泛化的 SOTA 表现且保持准确率,相比标准 RL 提升最高达 63%,同时增强模型评估和表达自身能力边界的能力。
研究者提出 FedCRF,将联邦学习的服务器聚合建模为基于条件随机场的结构化概率推断,把客户端表示为图节点并定义一元与成对能量势,从而联合推断客户端可靠性与相似关系。推断出的可靠性和亲和度可统一支撑全局聚合、拜占庭鲁棒性、聚类联邦学习和个性化联邦学习。在 CIFAR-10、FEMNIST 和 Fed-ISIC2019 上,单一超参数配置下其表现与专用方法相当或更优。
研究者提出 Critical Interval MSE(CI-MSE),一种用于机器人模仿学习策略的离线验证指标:先用零样本智能体定位任务关键片段,仅在这些片段上计算误差,并施加动作对齐处理以更贴近实际 rollout 行为。
针对行为克隆策略从演示数据中学到不安全行为模式的问题,研究者提出 MoRE(Mode Redirection),通过短暂的"去克隆"步骤将临时模式分类器的重定向信号蒸馏进策略权重,配合 retain loss 保留目标模式能力,使独立策略以零推理时开销抑制不想要的行为模式。
研究者提出 TISED 分析框架,统一量化量化、剪枝、异步推理等有损高效推理技术对具身任务的影响。该框架揭示三类悖论效应:静态任务中优化可能延长端到端完成时间,动态任务中适度有损优化反而能提升任务成功率,且两种效应的单调性与最优位置会随硬件配置变化。
研究比较了代码 LLM 的三种递归微调机制:无审查、使用编译和静态质量检查等模型无关过滤器的外部门控审查,以及使用困惑度和二元自评分等模型自身信号的 AI 自门控审查。
RoboGaze 是一个免训练的多智能体 VLM 评估器,通过将任务与场景接地、把子任务路由给维度专属专家并用 critic 核验,生成时间定位的诊断报告,覆盖 6 个维度和 30 种失败类型。
SPARK 将参数化知识控制建模为潜在参与策略学习问题,让 LLM 在生成时自适应调节参数化知识的贡献,同时保持主干模型完全冻结。该框架仅引入并优化 0.01% 的额外可训练参数,通过面向忠实性的奖励优化轻量参与策略,动态调节 FFN 介导的参数化知识。在六个数据集上的实验表明,SPARK 在保留主干 LLM 通用能力的同时,生成忠实度优于竞争基线,数据集与代码已公开。
研究者提出误差条件神经求解器(ENS),不再把 PDE 残差当作优化目标,而是在每次迭代中将残差场直接输入网络,让其学习更新策略以迭代修正预测。在四类 PDE 上,ENS 在绝大多数设置中取得最高预测精度,湍流 Kolmogorov 流上提升达 10 倍,同时避免了混合方法的昂贵计算成本。其学习到的修正策略在分布偏移下仍能泛化,包括零样本参数变化与跨方程迁移,在病态区域优势最大。
针对 GRPO 需多次 rollout 采样成本高的问题,研究者提出单次 rollout 强化学习方法 SR-PPO,结合蒙特卡洛 token 级优势估计与 Pass@k 梯度重加权。
研究提出 PADL(parsimoniously activated dictionary learning),证明其对激活字典原子数量施加全局正则化的形式可等价为结构化生成模型下的最大后验估计,并据此推导出稀疏度、存储成本与重建精度之间的解析权衡关系,实现最优超参数的数据驱动估计。
研究者提出 Reference-Anchored Reward Model(RARM),一种轻量视觉比较器,可将单条成功演示转化为稠密的进度感知奖励,训练仅用通用视频和对比式时序目标,无需机器人数据或任务专属奖励标注。
研究者提出 ScholarQuest,一个基于 1000 多个计算机科学主题、围绕四类研究意图构建的分类引导基准,并配套百万级文献环境 ScholarBase 与共享多轮搜索测试框架。
FinRED 是一个与金融专家共同开发的金融 LLM 安全红队测试框架,通过两级分类法将 FATF、EU DORA 等全球标准映射到从监管规避到复杂欺诈的威胁,并把真实金融文档转化为上下文丰富的红队测试行为提示词种子。
一项被 CoRL 2026 接收的研究提出,在最小安全到达奖励之上把人类演示当作正则化目标,仅用 30 分钟人类演示数据(比同类模仿学习方法少 2500 倍)即可让自我对弈训练出的驾驶策略与人类轨迹协调一致。该方法在单块消费级 GPU 上 15 小时完成训练,缓解了纯自我对弈策略行为约定与人不兼容的问题。
研究者提出数据感知的模型合并框架 ESD 与 ESM,通过代理数据识别每个任务更新中能量集中的主导方向(即 essential subspace),并按输出偏移特征值加权、跨任务正交化以减少干扰。ESM++ 进一步动态整合低秩任务专属残差专家实现自适应知识聚合。多任务集与多模型规模实验显示,ESM 与 ESM++ 能有效聚合任务知识并缓解任务间干扰,代码已开源。
研究提出一套以数据为中心的长上下文强化学习配方,围绕检索、多证据综合与推理三类任务构建八个数据集、共约 14K 样本,仅搭配基于结果的最小化 GRPO 设置。在 Qwen3-4B/8B/30B-A3B 三个模型上,于七个长上下文 benchmark 平均提升 +7.2/+3.2/+6.4 分,超过此前的 RL 训练集。
研究者提出 ReGrad(Retrievable Gradients),将梯度视为可检索的知识单元:离线预计算文档专属梯度并存入索引化的 Gradient Bank,推理时仅检索与查询相关的梯度做临时权重适配,从而避免持续后训练中的权重漂移。
研究提出 LLM 评判模型存在"暗电流"现象,即对完全相同的重复输入仍产生非平局偏好。在 102 条 RewardBench 2 样本上,四个配置-准则组合均报告 0/102 克隆偏好,但严格效用下界 .539 和 .745 未达 .75 阈值;另一配置出现 2/102 克隆偏好却通过中性效用检验。
研究者提出 ThreadBench,一个基于 9,817 条真实 Reddit 讨论帖、覆盖 8 个领域和 116 个子版块的基准,用均匀性、表达、语气、互动 4 类共 12 项指标对比生成讨论与真实讨论。
针对 DiT 在图像编辑中占平均 73% 延迟的问题,研究者提出输入自适应 Token 压缩框架 HiLo-Token,对高频富上下文区域分配更多 Token、低频区域分配更少。在 A100-80GB 上,小、中、大掩码比例(平均 6.38%、15.92%、35.36%)分别取得 3.13×、2.59×、1.67× 的 DiT 加速且生成质量无退化,生产环境中服务所需 GPU 减少 33%。
研究用 BDD100K 道路场景的受控损坏实验,检验 CLIP 图像-文本相似度导出的危险分数变化能否由嵌入漂移预测。结果显示两者关系高度依赖损坏类型:部分损坏族中表征漂移与决策漂移强耦合,另一些则在嵌入变化不大时仍引发危险决策不稳定。多数损坏族通过漏检抑制危险识别,遮挡则触发误报,表明鲁棒性基准应纳入任务对齐的稳定性指标。
研究者提出 RAIL——一个基于 Cattell-Horn-Carroll(CHC)框架、以人为中心的听觉智能基准,将听觉认知形式化为五项核心能力并构建结构化评测任务。
研究提出一种面向 OS 集成 AI 的特征边界审计方法,结合六类隐私失效面分类、五维控制评分表与相邻数据及权限路径记录,并依据公开文档对 Apple Foundation Models、Apple Private Cloud Compute、Android AICore/Gemini Nano 和 Microsoft Recall 进行分析。
FiberTune 是一种训练时目标,通过在线动作探针从中间视觉 token 表示中筛选动作预测方向,并用冻结视觉教师做居中方向对齐与有效秩正则,保留教师结构化视觉残差且不增加推理开销。
研究者提出 PERSIST 技能注入方法,将攻击者选定的动作与可复用的实用函数绑定,在 SkillsBench 和 Skill-Inject 上,冻结的技能包可跨四种智能体-模型配置迁移,并泛化到多个未见任务而无需修改。该方法在任务成功完成的同时产生有害效果,匹配对比中其有害效果率高于两个基线,且源码检查与表达怀疑更少。
DataEvolver 是一个通过多级自进化自动构建数据处理流水线的数据准备系统,在算子层面扩展算子库并优化逻辑计划以解决依赖冲突,在流水线层面将计划实例化为代码并利用试运行输出反馈迭代优化。在七个基准上,其数据质量显著提升,下游 LLM 性能相比原始数据训练平均提升约 10 分。
研究者提出扭矩自适应模块 TAM,通过在底层控制器与机器人扭矩接口之间学习残差扭矩修正,让同一策略适配不同机器人,无需对策略本身做域随机化。TAM 仅依赖本体感知历史,同一权重可复用于关节目标、末端目标或直接扭矩等不同动作空间,并采用多机器人预训练加机器人特定微调、全程无需真机数据。
研究用 GRPO 结合 RaR-Medicine 的评分标准监督,提出方差感知奖励框架,从准则级结果构建连续奖励以保留部分得分、降低奖励稀疏性。基于低秩适配器与量化权重的 Qwen3-14B,在留出的心脏相关 HealthBench 子集上最佳变体将准确率从 0.362 提升至 0.502、F1 从 0.532 提升至 0.668,接近 GPT-OSS-120B。
研究者提出 EgoProactive 智能眼镜数据集与跨域基准 Pro²Bench,用于评测主动式多模态助手的干预时机、流程完成度和响应质量。零样本下没有前沿或开源权重模型能在首次出错前完成超过 26% 的流程干预。其 PWR(Plan, Watch, Recover)架构在上下文中维护显式计划状态并在每次干预后修订,在三个开源权重骨干上把平均流程完成率从 20% 提升到 27%。
研究者推出 NoRA,一个视觉第一人称视频基准,要求模型从零生成候选下一步动作,并通过显式的"事实-理由-动作"支撑图说明理由。该基准包含 1,420 段标注视频片段,分为 HumanGold-190 与 LLMSilver-1230,按动作对齐、事实溯源与支撑绑定三项指标汇总为可溯源合理性分数。
Instant-Fold 是一个面向可变形物体操作的上下文模仿学习框架,仅凭单次人类演示即可推断并执行多种操作模式,无需梯度更新。该方法先通过时序对比预训练学习形变感知视觉表征,再用以演示为条件的流匹配 Transformer 策略预测动作。框架完全在仿真中训练,可泛化到多种折叠模式并零样本迁移到真实环境,论文已被 CoRL 2026 接收。
研究对比三种自适应分块方法与调优后的固定分块基线,在长时程预测基准上准确率差异普遍很小,自适应分块并无一致优势,固定分块通常训练更快且推理时无需自适应路由。作者进而提出预算化分块分配的理论框架,给出非均匀分配在相同预算下优于均匀分配的精确判据,并指出即使区域权重排序正确,过度重新分配分辨率也可能增加损失。
OpenAgenet / OAN 黄皮书提出一套协议中立的信任层,用于开放 Agent 互联与可发现的 AI 资源产品,涵盖 did:oan 身份对象、注册流程、治理背书的 Root 生命周期、Root 验证包模型及授权感知 Discovery。
OpenAgenet(OAN)白皮书提出一套协议中立的可信 Agent 互联信任层,解决 Agent 进入多运营方开放网络时的身份溯源、治理状态、发现授权与连接前信任验证问题。
研究者提出"智能体经济"框架,让基于 LLM 的智能体通过拍卖竞争行动权、交换支付并从环境奖励中积累财富,以去中心化激励机制自发形成全局规划。该框架从弱智能体起步,在数学推理、金融研究、科学研究、加速器设计与分布式系统优化五项任务上均优于更强的单体基线,并涌现出多步推理策略。
针对推理语言模型(RLM)在多语言推理中因语言理解失败而表现不佳的问题,研究者提出 Luar——一个语言理解边界感知强化学习框架,训练模型在直接理解不可靠时才选择性地调用翻译。在 Qwen3-4B 上,Luar 相比标准 GRPO 平均准确率提升 8.4 个百分点,低资源语言上增益尤为明显,并将翻译调用集中在真正受益的查询上以降低推理成本。项目将公开。