跳到正文
热点事件持续更新

研究将token提交策略作为掩码扩散生成控制面

1 篇报道1 个报道来源4 小时前更新

先了解这件事

AI 综述

Ambroise Aigueperse等作者提出把token提交策略作为掩码扩散模型的控制面,并拆成两个决策:提交哪些token、每步提交多少token。前者按模型置信度与留一token目标贡献的混合排序未解析位置,后者用目标进度与置信度驱动的校准自适应预算。 作者称,在LLaDA系列的语言与视觉语言设置中,两种机制在多个目标、两种激活引导方法及无引导对照下均呈现单调的目标质量权衡,并在Dream-7B上复现。

AI 根据报道生成 · 1 小时前更新

报道时间线

沿着报道,了解事件的不同侧面。

11月18日
  1. arXiv cs.AI
    将 Token 提交作为控制面:引导掩码扩散生成的新方法

    研究提出将 token 提交策略作为掩码扩散模型的控制面,拆分为"提交哪些 token"与"每步提交多少 token"两个决策。前者用模型置信度与留一 token 目标贡献的混合排序未解析位置,后者采用由目标进度与置信度驱动的校准自适应预算。在 LLaDA 系列的语言与视觉语言设置中,两种机制在多个目标、两种激活引导方法及无引导对照下均呈现单调的目标质量权衡,并在 Dream-7B 上复现。

本事件热度走势

还没有足够的连续观测数据,暂不绘制趋势。