面壁智能 EC²-Bench 研究:边缘智能体何时该让云端执行
面壁智能EC²-Bench研究:边缘智能体何时该让云端执行
面壁智能提出 EC²-Bench,用 128 个可执行任务评测长程智能体执行中的边云协作,比较四种策略并同时衡量任务完成度、资源成本与隐私暴露。Qwen3.5-9B 端侧配 GLM-5.3 云端时,最佳协作得分 60.46,约为纯云端 82.70 的 73%,成本仅 $8.73,约为纯云端 $56.42 的 15%。
OpenBMB· @OpenBMB · X·2026-10-24 21:00· 1 小时前AI 评分43
AI 导读
面壁智能提出EC²-Bench,用128个可执行任务系统评测长程智能体执行中的边云协作,比较四种策略并同时衡量任务完成度、资源成本与隐私暴露。Qwen3.5-9B端侧配GLM-5.3云端时,最佳协作得分60.46,达纯云端82.70的约73%,成本仅$8.73,约为纯云端$56.42的15%。
正文 · 原文
云端何时应当为端侧智能体执行任务,何时又只应提供建议?
我们系统性地研究了长程智能体执行中的边云协作。借助 EC²-Bench,我们在 128 个可执行任务上评估了四种协作策略,同时衡量任务完成度、资源成本与隐私暴露。
以下是三项关键发现:
1️⃣ 云端预算小,收益大。(成本效率)。端侧运行 Qwen3.5-9B、云端运行 GLM-5.3 时,纯端侧得分为 39.12;最佳协作达到 60.46——约为纯云端(82.70)的 73%——而成本仅为 $8.73,约为纯云端 $56.42 的 15%。
2️⃣ 性能趋同,隐私不然。在 Qwen3.7-Plus 上,最佳协作达到 76.84,纯云端为 82.70;策略差距缩小到仅 3.67 个完成度百分点,但隐私暴露跨度达 66.23 个百分点——而且表现最好的策略泄露最多。
3️⃣ 模式随端侧能力而翻转。弱端侧最适合由外部路由器让云端执行(2B:逐步路由 39.97 对自我委派 15.86);更强的端侧则在云端仅提供建议时表现最佳(9B 云端建议 60.46)。
进一步实验凸显了两项对有效自主协作至关重要的能力:知道何时求助,以及真正依据云端建议采取行动。
📄 论文:http://arxiv.org/abs/2610.17816
🌐 项目:http://passionate11.github.io/ec2-bench-project-page/
💻 代码:http://github.com/OpenBMB/EC2-Bench
#EdgeCloudCollaboration #AIAgent #LLM #OnDeviceAI #AgentBenchmark #EC2Bench #OpenBMB #Tsinghua
来源:OpenBMB · x.com
来源:RadarAI · aihot.news