跳到正文
热点事件持续更新

形式语义检验显示LLM智能体规划能力有限

1 篇报道1 个报道来源10 小时前更新

先了解这件事

AI 综述

一项 arXiv 论文用隐藏 PDDL 模型检验 LLM 智能体的规划能力,覆盖五个领域、四个模型、六种提示策略和三种智能体架构。结果显示,最佳配置在离线条件下解决 78% 的可解任务,在线条件下仅 40%,且智能体多数情况下不检查状态;对不可解任务的识别率不足 10%。 研究还发现,更重的提示策略消耗 5 至 22 倍 token 却无明显收益,规划表现随模型变化的幅度大于随提示策略或架构变化的幅度。

AI 根据报道生成 · 1 小时前更新

报道时间线

沿着报道,了解事件的不同侧面。

10月19日
  1. arXiv cs.AI
    研究用形式语义检验 LLM 智能体的规划能力

    一项 arXiv 论文用隐藏 PDDL 模型检验 LLM 智能体的规划能力,覆盖五个领域、四个模型、六种提示策略和三种智能体架构。最佳配置在离线条件下解决 78% 的可解任务,在线条件下仅 40%,且智能体多数情况下不检查状态;不可解任务的识别率不足 10%。更重的提示策略消耗 5 至 22 倍 token 却无明显收益,规划表现随模型变化的幅度大于随提示策略或架构变化的幅度。

本事件热度走势

还没有足够的连续观测数据,暂不绘制趋势。