跳到正文
热点事件持续更新

EnvLunch:用环境信号做无标注智能体预热训练

1 篇报道1 个报道来源11 小时前更新

先了解这件事

AI 综述

Wei Liu 等作者提出 EnvLunch,一种在智能体强化学习之前进行的无标注预热阶段:先采样有效动作轨迹并执行,得到最终观测,再训练模型仅凭最终观测还原功能等价的轨迹,全程不使用人工编写或模型生成的任务描述。 作者称,这种与标签无关的预热使模型在所有下游训练预算下平均超过基线 9 分以上;在少标签场景下,基线需 8 至 32 倍标注样本才能达到其最小预算的精度。作者还称,让环境自行定义任务的效果优于让模型自写任务,该预热也能提升数据分析之外 benchmark 上的微调表现。

AI 根据报道生成 · 1 小时前更新

报道时间线

沿着报道,了解事件的不同侧面。

10月27日
  1. arXiv cs.AI
    EnvLunch:把可执行环境当作免费午餐,无需标注的智能体预热训练

    EnvLunch 提出一种无需人工标注的智能体预热阶段:采样有效动作轨迹并执行得到最终观测,再训练模型仅凭最终观测还原功能等价的轨迹。该标签无关预热使模型在所有下游训练预算下平均超过基线 9 分以上,少标签场景下基线需 8 至 32 倍标注样本才能达到其最小预算的精度。让环境自行定义任务的效果优于让模型自写任务,该预热还能提升数据分析之外 benchmark 上的微调表现。

本事件热度走势

还没有足够的连续观测数据,暂不绘制趋势。