跳到正文
热点事件持续更新

研究者提出多模态知识图谱基础模型TOFU

1 篇报道1 个报道来源12 小时前更新

先了解这件事

AI 综述

Yichi Zhang等作者提出基于token的多模态知识图谱基础模型TOFU,用于多模态知识图谱推理(MMKGR)。该方法把结构、视觉和文本信息离散为模态专属token,并通过带混合消息机制的层次化融合架构获得可迁移特征。 在17个直推、归纳与完全归纳多模态知识图谱上,TOFU总体优于强KGFM与MMKGR基线,并在未见过的MMKG上表现良好。

AI 根据报道生成 · 2 小时前更新

报道时间线

沿着报道,了解事件的不同侧面。

10月28日
  1. arXiv cs.CL
    TOFU:用细粒度可迁移多模态 Token 构建知识图谱基础模型

    研究者提出基于 token 的知识图谱基础模型 TOFU,用于多模态知识图谱推理(MMKGR),将结构、视觉和文本信息离散为模态专属 token,并通过带混合消息机制的层次化融合架构获得可迁移特征。在 17 个直推、归纳与完全归纳 MMKG 上,TOFU 总体优于强 KGFM 与 MMKGR 基线,在未见过的 MMKG 上表现良好。

本事件热度走势

还没有足够的连续观测数据,暂不绘制趋势。