跳到正文
arXiv cs.AI· Yudong Bai, Yihong Chen, Quanming Yao, Yaqing Wang·· 9 天前AI 评分27

DeltaReplay:面向移动 GUI 智能体的任务相对记忆复用

DeltaReplay: Task-Relative Memory Reuse for Mobile GUI Agents

AI 导读

DeltaReplay 是一个步骤级记忆复用框架,将执行轨迹存为转移图中的路径,复用时将每条边的动作拆分为任务无关操作与任务特定参数,再逐步决定跟随、替换参数执行或交由基础智能体处理。在 AndroidWorld 和 SPA-Bench 上,其任务成功率较同骨干基础智能体分别最高提升 10.3 和 25.0 个百分点。

正文 · AI 翻译

查看 PDF HTML(实验性)

摘要:记忆增强型移动 GUI 智能体会存储成功执行轨迹,并在后续任务中复用,但存储的轨迹很少与新任务完全匹配。新任务可能使用不同的参数,只与存储轨迹共享部分步骤,或者记忆中没有相关记录。强迫智能体使用无关记忆可能会误导它,而丢弃可能仍有用的记忆则会使它失去过往经验的指导。为解决这一困境,我们提出 DeltaReplay,一种步骤级记忆复用框架,可在不修改现有记忆的情况下决定如何使用它。我们观察到,存储记录中可复用的部分并非由记录本身决定,而是由它与新任务的关系决定,主要通过两个因素:页面级一致性和动作级通用性。因此,我们将执行轨迹存储为转移图中的路径,其节点(页面)和边(页面之间的动作)捕捉这两个因素。在复用时,每条边上的动作被拆分为任务无关的操作和任务特定的参数。DeltaReplay 随后将每个记录步骤与新任务和当前屏幕进行比较,并决定是遵循它、替换其参数后执行它,还是交给基础智能体处理。在 AndroidWorld 和 SPA-Bench 上,DeltaReplay 相比使用相同骨干网络的基础智能体,任务成功率分别最高提升 10.3 和 25.0 个百分点。这些结果表明,在每一步决定如何使用检索到的记忆,能让智能体即使从部分匹配的轨迹中受益。
评论: 22 页
主题: 人工智能(cs.AI)
引用为: arXiv:2610.11707 [cs.AI]
  (或 arXiv:2610.11707v1 [cs.AI] 用于此版本)
  https://doi.org/10.48550/arXiv.2610.11707

arXiv 颁发的 DOI,经由 DataCite(待注册)

提交历史

来自:Yudong Bai [查看邮箱]
[v1] 2026 年 10 月 8 日星期四 11:12:57 UTC(2,617 KB)

来源:arXiv cs.AI · arxiv.org