研究显示多智能体团队消耗大量 token 却几乎无质量提升
评测公司 Vals AI 在 Vibe Code Bench 上测试 GPT-6 Sol 和 Claude Opus 5.5 的单智能体与团队表现,团队成本为单体的 1.8x 到 5.1x,四组对比中仅 GPT-6 Sol 在 medium reasoning 下高出 7.3 分且具统计显著性,maximum reasoning 下团队配置对两个模型都无实质优势。
The Decoder:AI 新闻· Matthias Bastian·2026-10-11 23:39· 1 小时前AI 评分65
研究发现,AI 智能体团队消耗大量 token,却几乎无法带来可衡量的质量提升
AI 导读
Vals AI 在 Vibe Code Bench 上测试 GPT-6 Sol 和 Claude Opus 5.5 的单智能体与团队表现,团队成本为单体的 1.8x 到 5.1x,四组对比中仅 GPT-6 Sol 在 medium reasoning 下高出 7.3 分且具统计显著性。
正文
2026年10月11日
研究发现,AI 智能体团队带来的结果几乎不比单智能体更好。
评估公司 Vals AI 在“Vibe Code Bench”上测试了 GPT-6 Sol 和 Claude Opus 5.5,分别以单智能体和团队形式运行,并采用两种推理级别:medium 和 maximum reasoning effort。团队的成本比单智能体高出 1.8x 到 5.1x。
在团队与单智能体的四组对比中,只有一组显示出统计显著的提升:GPT-6 Sol 在 medium reasoning 下,团队得分高出 7.3 分。在 maximum reasoning 下,团队设置既没有给 Sol 也没有给 Opus 5.5 带来任何真正优势。结果表明,在大多数情况下,智能体团队的额外成本并不值得,尤其是当模型已经在满算力运行时。

Anthropic 在其自身两项使用 Opus 5.5 的测试中发现,随着增加更多智能体,质量提升逐渐缩小。更大的团队能更快达到某一性能水平,但在 24 小时后,从 10 个智能体增加到 100 个智能体只让得分略有上升。在单独的 ProgramBench 测试中,速度提升伴随着更高的 token 使用量。
| 使用 Opus 5.5 的任务 | 1 个智能体 | 10 个智能体 | 30 个智能体 | 100 个智能体 |
|---|---|---|---|---|
| 知识库 | 0.53 | 0.70 | 0.71 | 0.74 |
| Lean 定理证明 | 0.39 | 0.66 | 0.66 | 0.68 |
Fable 5.1 在 Lean 定理证明任务中,超过 10 个智能体后显示出更强的质量提升,但在所有测试中得分仍低于 Opus 5.5。在知识库任务中,Fable 从 30 个智能体扩展到 100 个智能体时,得分实际上略有下降。
更多智能体换来速度,而非更好的输出
OpenAI 研究员 Noam Brown 在 Dwarkesh Podcast 中确认,多智能体系统主要换来的是速度,而不是更好的质量。四个智能体解决任务的速度快了一倍,但成本也翻了一倍。在 16 个智能体时,这一模式仍然成立,但效率略有下降。
他说,这种效果在很大程度上取决于任务。网络研究和数学很适合并行化,但写小说不适合。把 10,000 个智能体投入写小说,就像把 10,000 个人投入写小说一样毫无意义。Brown 承认,扩展到极大量智能体在很大程度上仍未被探索,因为成本实在太高。
OpenAI 开发者 Eric Provencher 最近正是出于这个原因警告不要使用智能体集群。他认为,它们很可能是在浪费钱,因为智能体之间的协调会崩溃。他称之为协调税。
没有炒作的 AI 新闻——由人类精选
订阅 THE DECODER,享受无广告阅读、每周 AI 新闻通讯、我们每年六次的独家“AI Radar”前沿报告、完整档案访问权限,以及评论区访问权限。
- 完整访问 THE DECODER 上的每一篇文章
- 无广告
- 加入评论和社区讨论
- 每周通过邮件获取 AI 新闻回顾
- 每年 6 次:“AI Radar”——深入探讨最重要的 AI 主题
- 每日 AI 新闻,始终紧跟最新动态
- 我们完整的十年存档
- 由拥有 10 年以上 AI 经验的团队报道
来源:The Decoder:AI News · the-decoder.com
来源:RadarAI · aihot.news