跳到正文
arXiv cs.AI· Yifan Zhou, Ziyang Gong, Xiaojun Ye, Yifei Liu, Donggang Li, Xiaolong Zhou, Zhihang Zhong, Xue Yang·· 12 小时前AI 评分34

SpatialBrain:从经验中生长的空间智能

SpatialBrain: Spatial Intelligence Growing from Experience

AI 导读

SpatialBrain 框架在保持视觉语言主干模型固定的前提下,通过 3DFusionMemory 融合当前场景观测为可查询的空间关系,并借助 Spatial Skill Library 与 Spatial Cognition 积累"何时及如何"使用记忆与技能的经验。

正文 · AI 翻译

查看 PDF HTML(实验性)

摘要:空间推理不仅仅需要能够使用几何工具:推理者必须判断何时直接观察已经足够,何时需要重建、测量或改变参考系。我们提出 SpatialBrain,这是一个在保持视觉语言主干固定的同时,保留关于这些决策的经验的框架。关键区别在于关于场景的证据与关于如何利用该证据进行推理的经验之间的区别。3DFusionMemory 将当前场景的观察结果融合为可查询的空间关系。空间技能库提供可复用的工具流程,而空间认知则将任务条件与关于何时以及如何使用记忆和技能的经验关联起来。已完成的轨迹被抽象为过程记录,并在任务块之间进行整合,使后续决策能够借鉴先前的执行过程,而无需传递场景坐标或参考答案。在五个空间推理基准上,SpatialBrain 在四个基准上优于同一主干的直接回答,在第五个基准上与之持平。组件比较、经验覆盖曲线以及追踪到的资源决策刻画了该框架如何积累和使用这些资源。
主题: 人工智能(cs.AI)
引用为: arXiv:2610.29317 [cs.AI]
  (或 arXiv:2610.29317v1 [cs.AI] 用于此版本)
  https://doi.org/10.48550/arXiv.2610.29317

arXiv 通过 DataCite 颁发的 DOI(待注册)

提交历史

来自:Yifan Zhou [查看电子邮件]
[v1] 2026年10月21日星期三 07:15:54 UTC(7,713 KB)

来源:arXiv cs.AI · arxiv.org