动态专家跳过未胜静态基线：MoE受控对比

Jakob Steimle等作者发表受控对比研究，将四种代表性MoE动态专家跳过方法归入统一分类，并在同等专家计算预算下与“静态降低专家数k”这一简单基线比较。测试覆盖纯文本场景的Gemma4-26B-A4B、Qwen3-30B-A3B，以及多模态场景的Qwen3-VL。 研究结论指向：在这些设定下，动态专家跳过方法未能超越静态基线，作者据此提出“别跳过基线”。该结论限于上述模型与同等专家计算预算的对比条件。

AI 根据报道生成 · 55 分钟前更新

还没有足够的连续观测数据，暂不绘制趋势。