arXiv cs.CL· Mengzhao Jia, Yang Lin, Xixin Zhang, Zhihan Zhang, Meng Jiang·· 10 小时前AI 评分52
Agent as Policy:通用编码智能体直接驱动机器人操作
Agent as Policy for Robotic Manipulation
AI 导读
论文提出 Agent as Policy(AGP),让通用编码智能体无需任务或环境特定训练即可直接驱动机器人,由智能体解读视觉信息、编写可执行程序、下发运动指令并根据物理结果修正动作。
正文 · AI 翻译
摘要:我们证明,通用编码智能体可以在整个任务执行过程中直接驱动物理机器人,而无需任何针对任务或环境的专门训练。我们提出“智能体即策略”(Agent as Policy,AGP),将任务规划与执行置于智能体的控制之下。给定任务和机器人接口,智能体解读视觉证据、编写可执行程序、发出运动指令,并根据物理结果修正其动作。这将智能体的推理与编程能力带入与物理世界的持续交互之中。我们在多个真实世界操作任务中研究 AGP,涵盖精密操作、动态运动与可变形物体,包括从人类视频中进行装配、根据目标图像进行积木搭建、翻转骰子、定向投掷以及双臂毛巾折叠。AGP 在八种任务配置中的七种上达到至少 80% 的成功率,并显著优于以往的智能体机器人系统。我们进一步通过任务经验积累研究效率,发现复用已保存的流程和程序可缩短重复试验中的执行时间。这些发现为通用智能体充当机器人策略提供了路径,通过运行时推理、编程与交互将其自主性扩展至物理操作。
| 学科: | 计算与语言(cs.CL) |
| 引用为: | arXiv:2609.12541 [cs.CL] |
| (或 arXiv:2609.12541v4 [cs.CL] 为本版本) | |
| https://doi.org/10.48550/arXiv.2609.12541 由 DataCite 颁发的 arXiv DOI |
提交历史
来自:Mengzhao Jia [查看邮箱]
[v1]
2026年9月11日星期五 07:51:39 UTC(36,102 KB)
[v2]
2026年9月14日星期一 08:11:02 UTC(19,719 KB)
[v3]
2026年9月28日星期一 22:20:30 UTC(18,417 KB)
[v4]
2026年11月18日星期三 23:18:56 UTC(23,264 KB)
来源:arXiv cs.CL · arxiv.org