跳到正文
热点事件持续更新

研究者提出智能体数学能力过程级基准

1 篇报道1 个报道来源11 小时前更新

先了解这件事

AI 综述

Jiayi Kuang等作者提出一个过程级基准,用于评测大语言模型的智能体数学推理能力,把解题行为对齐到可复用的数学原子能力分类体系。该框架覆盖文本与多模态场景下的规划、行动和反馈任务,通过自动化流水线合成轨迹,并借助受控大模型改写生成细粒度标注。 作者称,实验显示端到端准确率相近的模型在智能体能力画像上存在明显差异,即总分接近的模型在过程层面的能力表现并不相同。

AI 根据报道生成 · 2 小时前更新

报道时间线

沿着报道,了解事件的不同侧面。

10月22日
  1. arXiv cs.CL
    从原子能力到智能体:面向 LLM 智能体数学能力的可解释评测框架

    研究者提出一个过程级基准,用于评测 LLM 的智能体数学推理能力,将解题行为对齐到可复用数学原子能力的结构化分类体系。该框架覆盖文本与多模态场景下的规划、行动和反馈任务,并通过自动化流水线合成高质量轨迹、借助受控 LLM 改写生成细粒度标注。实验显示,端到端准确率相近的模型在智能体能力画像上存在明显差异。

本事件热度走势

还没有足够的连续观测数据,暂不绘制趋势。