跳到正文
热点事件持续更新

研究提出LEMS与KFAC-SVD改进SVD低秩压缩

1 篇报道1 个报道来源10 小时前更新

先了解这件事

AI 综述

Moritz Thoma等作者提出两种改进基于SVD的低秩大模型压缩方法:逐层误差建模搜索(LEMS)与KFAC-SVD。作者称,这两种方法针对现有SVD压缩的局限而设计。报道未给出压缩效果、适用模型规模或评测结果。

AI 根据报道生成 · 53 分钟前更新

报道时间线

沿着报道,了解事件的不同侧面。

10月26日
  1. arXiv cs.AI
    基于逐层误差模型搜索的 SVD 大模型压缩方法 LEMS 与 KFAC-SVD

    研究提出 Layer-wise Error Modeling Search(LEMS)与 KFAC-SVD 两种方法改进基于 SVD 的低秩 LLM 压缩。

本事件热度走势

还没有足够的连续观测数据,暂不绘制趋势。