HyperRepair:推理阶段恢复微调模型通用能力
热点事件持续更新
HyperRepair:推理阶段恢复微调模型通用能力
1 篇报道1 个报道来源9 小时前更新
先了解这件事
AI 综述
Junrong Tang 等人提出 HyperRepair 框架,称可在仅付出推理成本的情况下恢复微调语言模型被削弱的通用能力,同时保留领域专精。 据该框架描述,它从源模型上的修复过程学习超网络,利用激活指纹为未见适配领域的模型生成定制 Repairing Side Net(RSN),无需目标领域样本或额外优化。上述效果目前来自提出者的说法。
AI 根据报道生成 · 58 分钟前更新
最新进展11月2日 13:00
HyperRepair:恢复微调语言模型遗忘的通用能力报道时间线
沿着报道,了解事件的不同侧面。
11月2日
- arXiv cs.CLHyperRepair:恢复微调语言模型遗忘的通用能力
HyperRepair 框架可在仅付出推理成本的情况下恢复微调语言模型被削弱的通用能力,同时保留领域专精。它从源模型上的修复过程学习超网络,利用激活指纹为未见适配领域的模型生成定制 Repairing Side Net(RSN),无需目标领域样本或额外优化。
本事件热度走势
还没有足够的连续观测数据,暂不绘制趋势。