跳到正文
arXiv cs.AI· Ghadi Nehme, Dahyun Nam, Akshay Govind Srinivasan, Faez Ahmed·· 10 小时前AI 评分59

RoboBuilder:编码智能体用真实视频反馈协同设计机器人

RoboBuilder: Agentic Robot Co-Design with Real-world Video Feedback in the Loop

AI 导读

研究团队提出 RoboBuilder 基准,让编码智能体用标准零件、电机和定制 3D 打印件协同设计机器人硬件与程序,每个通过仿真的设计都会在实体赛道上搭建测试。

正文 · AI 翻译

查看 PDF HTML(实验性)

摘要:AI 智能体能否设计出在真实世界中工作的机器人?我们推出 RoboBuilder,这是一个基准测试,其中编程智能体使用标准零件、电机和一个定制 3D 打印零件来协同设计机器人的硬件和程序,并且每一个通过仿真测试的设计都会被制造出来并在实体赛道上进行测试。仅靠仿真是不够的:在公开零件数据下,15 个初始通过的设计中没有一个能通过真实赛道,因此智能体需要根据其请求的测量数据和真实运行视频来学习仿真器。在四个前沿编程智能体、三个难度级别的十个障碍、12,774 个不同机器人的 16,427 次仿真以及估计耗时 240 小时制造的 135 个实体机器人中,智能体几乎解决了所有简单障碍,并发明了我们的搜索基线无法达到的机制,但在更难的级别上表现不佳,即当一个机器人必须跨越所有障碍时,以及在真实世界中,所有级别中 66% 的仿真通过率得以保持。闭环有帮助:在观看其真实失败的视频后,智能体会重新设计机器人,有时会修正其仿真器,并消除了 72% 的 1 级和 2 级失败。RoboBuilder 衡量了朝着能够工程化真实机器的智能体所取得的进展。项目页面:this https URL
主题: 人工智能(cs.AI);计算机视觉与模式识别(cs.CV);机器人学(cs.RO)
引用为: arXiv:2611.23855 [cs.AI]
  (或 arXiv:2611.23855v1 [cs.AI] 用于此版本)
  https://doi.org/10.48550/arXiv.2611.23855

由 DataCite 颁发的 arXiv DOI(待注册)

提交历史

来自:Ghadi Nehme [查看电子邮件]
[v1] 2026年11月18日星期三 05:02:07 UTC(24,219 KB)

来源:arXiv cs.AI · arxiv.org