跳到正文
arXiv·· 12 天前AI 评分38

ArtifactArena:用模型在物理世界中的建造能力评估模型

ArtifactArena: Evaluating Models by What They Build in the Physical World

AI 导读

ArtifactArena 是一个开放式平台,让模型在物理落地的软硬件协同设计挑战中,设计能在模拟竞技场对战的完整机器人。平台通过三种测试框架评估前沿模型的零样本能力、验证器引导的迭代优化和开放式物理设计能力,分别依据文本描述、物理模拟器反馈和游戏数据来改进机器人产物。

来源:arXiv · arxiv.org