跳到正文
热点事件持续更新

研究者提出免训练即插即用N-gram记忆模块NGM

1 篇报道1 个报道来源13 小时前更新

先了解这件事

AI 综述

Yuwen Qu 等作者提出 N-gram Memory(NGM),一种免训练、即插即用的记忆模块。该模块直接复用主干模型预训练的 token 嵌入空间作为记忆,无需额外嵌入训练,也不需要独立记忆库或外部检索设施。 NGM 由 Causal N-Gram Encoder 和 Cosine-Gated Memory Injector 两部分组成。作者称,这一设计针对现有记忆方案需要额外训练或依赖外部检索的局限。目前该工作以预印本形式发布,尚未见经同行评审验证的效果数据。

AI 根据报道生成 · 2 小时前更新

报道时间线

沿着报道,了解事件的不同侧面。

10月27日
  1. arXiv cs.AI
    NGM:一种面向 LLM 的免训练即插即用记忆模块

    研究者提出 N-gram Memory(NGM),一种免训练、即插即用的记忆模块,直接复用主干模型预训练的 token 嵌入空间作为记忆,由 Causal N-Gram Encoder 和 Cosine-Gated Memory Injector 两部分组成,无需额外嵌入训练或独立记忆库与外部检索设施。

本事件热度走势

还没有足够的连续观测数据,暂不绘制趋势。