arXiv cs.AI· Mingliang Zhai, Chuanhao Li, Jiaming Tan, Zhen Li, Yuwei Wu, Yunde Jia, Zian Meng, Yuanyang Yin, Kaipeng Zhang·· 10 小时前AI 评分31
WorldRuler:可配置规则下的交互式世界建模
WorldRuler: Interactive World Modeling under Configurable Rules
AI 导读
WorldRuler 提出用可执行 3D 规则图组织规则定义、依赖与物体状态,并将规则执行、视频生成与感知反馈连成闭环,以支持用户自定义规则驱动的交互式世界建模。
正文 · AI 翻译
摘要:规则决定了玩家行为如何改变交互世界。不同的规则在相似的场景和动作空间中创造出不同的游戏体验。为了实现可定制的游戏玩法,生成式世界模型必须遵循用户定义的规则,而不仅仅是现实世界的行为。然而,实现用户定义的规则面临两个挑战:规则-状态持久化和规则到视觉的实现。前者要求在保存和加载过程中保留规则定义、依赖关系和世界状态,以便恢复后的世界遵循既定规则。后者要求准确地在指定对象和属性上实现规则引起的变化,特别是当受影响的对象不可见时。在本文中,我们提出了 WorldRuler,它将规则定义、依赖关系和对象状态组织在一个可执行的 3D 规则图中,并将规则执行、视频生成和感知反馈连接成一个闭环。该图支持规则和世界状态的联合保存与恢复,同时动态对象绑定将规则指定的实体锚定到视觉实例中,并使用存储的状态从它们首次出现时约束生成。我们进一步引入了对象属性状态替换和反事实重建训练,从而实现准确的属性控制以及兼容的外观和运动变化,同时限制对无关内容的干扰。我们开发了一个使用 GTA-V 和 Habitat 的自动化数据收集和标注流水线,以构建 RuleVerse,这是一个包含详细状态和事件标注的规则驱动交互数据集,包括规则在受影响对象变得可见之前生效的情况。大量实验证明了 WorldRuler 在保存和加载过程中保持规则-状态一致性以及在指定对象和属性上准确实现规则结果方面的有效性。
| 评论: | V2 修正了作者列表和机构隶属关系中的错误。主页:此 https URL |
| 主题: | 人工智能(cs.AI) |
| 引用为: | arXiv:2611.24869 [cs.AI] |
| (或 arXiv:2611.24869v2 [cs.AI] 为此版本) | |
| https://doi.org/10.48550/arXiv.2611.24869 由 DataCite 颁发的 arXiv DOI |
提交历史
来自:Mingliang Zhai [查看电子邮件]
[v1]
2026年11月18日星期三 18:20:39 UTC(7,277 KB)
[v2]
2026年11月19日星期四 05:36:20 UTC(7,277 KB)
来源:arXiv cs.AI · arxiv.org