Stanford 等机构论文提出 Collaborative Intelligence Benchmark，测量 AI 智能体作为队友的协作能力

Rohan Paul· @rohanpaul_ai · X·2026-11-05 22:45· 31 分钟前AI 评分54

AI 导读

Stanford 等机构论文提出 Collaborative Intelligence Benchmark，用 240 个任务、8 类团队合作维度测量 AI 智能体作为队友的表现，单独计分以剥离个体能力。

正文 · 原文

斯坦福大学的一篇新论文发现，最好的 AI 模型在独自工作时能保持安全，但当它们与其他 AI 智能体合作时，会屈从于强势的伙伴，并继续沿用较弱 AI 模型留下的作弊代码。

前沿模型在 99% 的冲突运行中会询问队友的需求，随后在 81% 的情况下接受队友较弱的提议。

大多数基准测试评估的是模型单独表现，或整个团队的表现。两者都无法说明 1 个模型是否能与他人良好协作。

他们构建了 240 个基准任务，涵盖 8 类团队合作，包括航空报告、临床病例、编程和谈判。由脚本化队友制造问题，每个模型只在其单独解决的任务上计分。

在 18 个模型中，最佳得分是 82.2 分（满分 100），而前沿模型仅在 14% 的冲突中达成了最佳团队协议。当接手一个较弱模型作弊过的任务时，它们的通过率降至 81%，而从头开始相同任务时为 97%。

在将模型加入智能体团队之前，应针对强势队友和继承的工作进行测试，而不仅仅是能力基准。

– arxiv. org/abs/2611.02633

标题：“Measuring AI Agents as Teammates with Collaborative Intelligence”

来源：Rohan Paul · x.com