研究：引导向量可在图文生成间零样本双向迁移

Donghao Zeng等作者发表研究称，在多个统一多模态模型中发现，引导向量可零样本双向迁移：在文本token上找到的向量加到图像token上同样能引导生成，反之亦然。 研究称，即便对某一模态高度独有的概念（如正式与口语化语言），向量也能在另一模态引发一致且可解释的效果，如正式服装与设计。 研究还发现迁移的几何特征：尽管文本与图像表示间存在明显的模态鸿沟，跨模态迁移性强的引导向量在同一概念上倾向指向相似方向。

AI 根据报道生成 · 2 小时前更新

还没有足够的连续观测数据，暂不绘制趋势。