跳到正文
热点事件持续更新

研究者推出长程归纳交互基准 OdysseyArena

1 篇报道1 个报道来源11 小时前更新

先了解这件事

AI 综述

Fangzhi Xu 等研究者提出并发布 OdysseyArena,将大语言模型智能体评测重心转向长时程、主动与归纳式交互,并形式化定义四种原语。 该基准分为两部分:OdysseyArena-Lite 含 120 项任务,用于衡量归纳效率与长时程发现能力;OdysseyArena-Challenge 则在超过 200 步的极端交互时程下测试稳定性。 对 15 个以上领先大语言模型的实验显示,即便前沿模型在归纳场景中仍存在明显不足。

AI 根据报道生成 · 42 分钟前更新

报道时间线

沿着报道,了解事件的不同侧面。

10月27日
  1. arXiv cs.CL
    OdysseyArena:面向长时程、主动与归纳式交互的大语言模型基准测试

    研究者推出 OdysseyArena,将 LLM 智能体评测重心转向长时程、主动与归纳式交互,并形式化实例化四种原语。其中 OdysseyArena-Lite 提供 120 项任务衡量归纳效率与长时程发现能力,OdysseyArena-Challenge 则在超过 200 步的极端交互时程下压测稳定性。对 15+ 个领先 LLM 的实验显示,即便前沿模型在归纳场景中仍存在明显不足。

本事件热度走势

还没有足够的连续观测数据,暂不绘制趋势。