跳到正文
热点事件持续更新

Latent-Lens:冻结VLM与SLM隐空间通信

1 篇报道1 个报道来源9 小时前更新

先了解这件事

AI 综述

Mo Shahdloo等作者提出轻量编解码器Latent-Lens,让冻结的视觉语言模型(VLM)与冻结的纯文本小语言模型(SLM)直接在隐空间通过隐藏状态通信,从而为纯文本SLM补上视觉感知能力。 作者称,该方案仅训练约160万参数,占合并模型规模的0.2%。

AI 根据报道生成 · 50 分钟前更新

报道时间线

沿着报道,了解事件的不同侧面。

11月3日
  1. arXiv cs.AI
    Latent-Lens:让小语言模型通过隐空间通信获得视觉感知

    Latent-Lens 是一种轻量编解码器,让冻结的 VLM 与冻结的纯文本 SLM 直接在隐空间通过隐藏状态通信,仅训练约 1.6M 参数(占合并模型规模的 0.2%)。

本事件热度走势

还没有足够的连续观测数据,暂不绘制趋势。