BabelArena多语言Agent基准发布
热点事件持续更新
BabelArena多语言Agent基准发布
1 篇报道1 个报道来源10 小时前更新
先了解这件事
AI 综述
研究者 Peng Kuang 等提出 BabelFlow 工作流,并据此构建了多语言 LLM 智能体基准 BabelArena。该基准包含 16,146 个实例,源自 702 个规范任务,覆盖 4 个基准族、13 个领域和 23 种语言。 对五个前沿模型的测试显示,没有单一模型在所有基准族上占优;低资源语言下更常出现工具调用与控制流错误,且智能体在低资源语言下的输入 token 消耗最高约为英文的两倍。
AI 根据报道生成 · 45 分钟前更新
最新进展10月26日 12:00
BabelArena:面向 LLM 智能体的大规模多语言基准报道时间线
沿着报道,了解事件的不同侧面。
10月26日
- arXiv cs.CLBabelArena:面向 LLM 智能体的大规模多语言基准
研究者提出 BabelFlow 工作流并据此构建 BabelArena,一个包含 16,146 个实例、源自 702 个规范任务的多语言智能体基准,覆盖 4 个基准族、13 个领域和 23 种语言。五个前沿模型的测试显示,没有单一模型在所有基准族上占优,低资源语言更多出现工具调用与控制流错误,且智能体在低资源语言下的输入 token 消耗最高约为英文的两倍。
本事件热度走势
还没有足够的连续观测数据,暂不绘制趋势。