跳到正文
arXiv·· 14 天前AI 评分31

InstMoE:面向多模态学习的自适应专家路由框架

InstMoE: Adaptive Multimodal Routing with Specialized Experts

AI 导读

InstMoE 是一个面向多模态学习的自适应专家路由框架,可将每个输入动态路由至专门的单模态与跨模态专家,使模型按输入特征调整信息通路。该框架针对模态特有变化掩盖任务相关语义、进而误导路由决策的问题提出了应对思路。

来源:arXiv · arxiv.org