跳到正文
热点事件持续更新

粒子解码可零成本估计序列级Rényi熵

1 篇报道1 个报道来源9 小时前更新

先了解这件事

AI 综述

Erfan Baghaei Potraghloo 等作者提出,用于 power sampling 的 Sequential Monte Carlo(SMC)解码在估计幂分布归一化常数时,可零边际成本读出模型补全分布的序列级 Rényi 熵(SRE),作者称该结果在任意粒子预算下都有保证。 该熵值被定位为 LLM 自适应推理的不确定性信号,即无需额外计算即可从解码过程获得。

AI 根据报道生成 · 47 分钟前更新

报道时间线

沿着报道,了解事件的不同侧面。

11月11日
  1. arXiv cs.CL
    粒子解码的序列级 Rényi 熵:为 LLM 自适应推理提供零成本不确定性信号

    研究者证明,用于 power sampling 的 Sequential Monte Carlo(SMC)解码在估计幂分布归一化常数时,可零边际成本读出模型补全分布的序列级 Rényi 熵(SRE),且在任意粒子预算下都有保证。

本事件热度走势

还没有足够的连续观测数据,暂不绘制趋势。