Adobe 研究推出 EditAgent，用测量数据让语言模型更专业地使用图像编辑工具

The Decoder：AI 新闻· Jonathan Kemper·2026-11-01 22:56· 1 小时前AI 评分55

Adobe 正在测试 AI 智能体能否像 Photoshop 专业人士一样使用编辑工具

AI 导读

Adobe Research 与 UC San Diego 在论文中提出 EditAgent，将请求拆成步骤、并行生成候选，并用语言模型依据验证记录（特写、变化图、亮度色彩数据）一次性对比挑选。

正文 · 原文

Adobe 研究人员构建了一个用于图像编辑的 AI 智能体，将通用编辑器与专用工具配对。标准语言模型利用测量数据比较结果并选出最佳方案。

用于图像编辑的 AI 智能体将复杂请求拆解为多个步骤，通常会用相同的工具重试失败的步骤，而另一个模型则通过目测来评判输出结果。

Adobe Research 与 UC San Diego 的研究人员希望通过 EditAgent 改变这一现状，据一篇新论文介绍，该系统的工作方式更像 Photoshop 中的专业人士。它为每项任务选择正确的工具，并用确凿的数据将结果与原始图像进行对比。

Overview graphic comparing typical agentic image editing with EditAgent across three columns: Action Space, Observation Space, and Result. The top row shows repeated attempts with the same tools, while the bottom row shows parallel candidates from General, Local, Tone, and Style tools, judged by an off-the-shelf VLM using evidence in a single call. — EditAgent 不再反复重试同一个编辑器，而是用不同方法并行生成候选结果，并让一个未经修改的语言模型一次性比较所有候选。 | 图片：Adobe

通用编辑器在太多任务上失败

在对 600 次图像编辑的测试中，由五位专业人士进行盲评，通用编辑器 Flux-2-Klein-9B 有 42.7% 的情况下未能生成可用结果。专用工具解决了其中约三分之二的失败，尤其是在锐化、旋转和缩放方面。用同一个编辑器进行更多重试几乎无济于事。

研究人员还测试了智能体是通过逐步优化结果，还是通过并行生成多个变体表现更好。迭代优化会累积小错误，因为每一轮都建立在已经修改过的图像之上。在专业人士明确选择一方的比较中，有 78.5% 的情况下他们更青睐从原始图像并行生成的变体。该智能体所需的评估轮次也仅为其一半。EditAgent 正是基于这两项发现构建的。

确凿数据让标准模型成为更好的评判者

EditAgent 将请求按步骤规划，并在每一步让通用编辑器与相应的专用工具进行对比。随后，一个标准语言模型在一次处理中比较所有变体。

Architecture diagram of EditAgent using the example of extinguishing a candle flame. Planner, Step Analyzer, and Router select methods from the Capability Pool. Three candidates are generated in parallel with close-ups and change maps as evidence, and a VLM accepts candidate 3. Below, the steps Remove Flame, Add Smoke, and Adjust Lighting follow in sequence. — EditAgent 将请求拆解为相互依赖的步骤，并为每一步生成多个候选。语言模型根据验证数据选出最佳方案。 | 图片：Adobe

对于每个变体，模型都会获得一份验证记录，其中包含编辑区域的特写、改动区域的变化图，以及亮度和色彩的测量统计数据。在一个示例中，一张照片本应被轻微提亮。数据显示，通用编辑器将其过度曝光，并使色彩偏暖。而专用工具则保持在规格范围内。

Two examples of verification data. Top: a Removal Specialist and a General Editor remove a smiley patch from a checkered shirt, with the close-up revealing a blurred plaid pattern from the specialist. Bottom: a General Editor and a Photometric Operator brighten a dark still life, with measured brightness, clipping, and color shift values shown beneath. — 特写和测量得到的图像统计数据能揭示语言模型仅查看整张图像时遗漏的错误。 | 图片：Adobe

研究人员在他们包含 600 次编辑的基准测试上对此进行了测试。评判模型必须从多个候选中选出最佳结果，他们统计了它选中专业人士也评为可用的图像的比例。作为对比，他们运行了 EditScore 等基于人类图像编辑评分进行微调的模型。

没有验证记录，测试的七个语言模型没有一个能匹敌最佳微调模型。有了它，七个模型全部击败了所有微调模型。Qwen3.8-27B 有 81.3% 的情况下做出了可用的选择，而 EditScore-72B 为 74.8%。对研究人员来说，这表明评判模型看到的内容可能比它如何被训练更重要。

Dot plot of Winner-Set Hit@1 for seven Qwen and Gemma models, each with and without evidence, compared to fine-tuned evaluation models EditScore and EditReward. With evidence, scores rise by 6.3 to 9.3 percentage points, with Qwen3.8-Flash-Next reaching 82.8 percent. — 有了验证数据，所有测试的标准语言模型都优于最强的微调评估模型 EditScore-72B 的 74.8%。| 图片：Adobe

每一轮之后，EditAgent 还会检查后续编辑是否意外撤销了先前的编辑。在论文的示例中，指令“让更多日光进来”使之前磨砂的窗户重新变得透明。该智能体发现了冲突并修复了它。

Editing sequence of a bathroom in four images. In round 1, the window is frosted. In round 2, adding more daylight makes the glass clear again. The History Check catches the violation and restores the frosted glass while keeping the brighter lighting. — 每轮之后的检查确保后续编辑不会悄悄撤销先前的更改。| 图片：Adobe

EditAgent 在三个基准测试中改进了开源编辑器 Qwen-Image-Edit-2511 和 Flux-2-Klein-9B，并优于其他七个 AI 智能体。在 EdiVal 基准测试中，Qwen 变体在第三轮编辑中险胜商业模型 Seedream 4.0 和 GPT-Image-1.5。但该智能体所需的计算量约为单个编辑器的十倍，且其性能取决于接入哪些工具。

该智能体为更快的编辑器生成训练数据

研究人员还将 EditAgent 用作数据源。由于该智能体只保留经过验证的结果，它生成了约 26,000 个训练示例。在该数据上微调的编辑器在三个基准测试中均表现更好。另一方面，直接由 FLUX 生成的训练数据实际上使 FLUX 变得更差。这种权衡可能使该智能体的高计算成本随时间变得值得。

Adobe 于六月将 AI 智能体添加到 Photoshop、Premiere 和其他 Creative Cloud 应用中，最初以公开测试版形式推出。用户描述他们想要什么，智能体处理各个步骤。这些智能体选择正确工具并检查自身输出的能力如何，是一个直接适用于 Adobe 已发布产品的问题。Black Forest Labs 此后已替换了论文中测试的通用模型：新的 Flux 3 Image Klein 拥有 56 亿参数，比 Flux 2 Klein 更小，但在 Black Forest Labs 的内部测试中，其得分高于所有其他开源模型，甚至高于商业版 Flux 2 Pro。

没有炒作的 AI 新闻——由人工精选

订阅 THE DECODER，享受无广告阅读、每周 AI 新闻通讯、每年六次独家“AI Radar”前沿报告、完整档案访问以及评论区访问权限。

来源：The Decoder：AI News · the-decoder.com