察元AI教程库 · 文章 · 大模型

AA-SVD:大型语言模型压缩的锚定与自适应SVD

我们引入了一种快速的低秩分解框架,用于压缩大型语言模型,能够在不重新训练的情况下快速压缩数十亿参数的模型。与现有基于分解的方法仅在原始输入上进行优化不同,我们忽略了从

作者:Atul Kumar Sinha, François Fleuret · 语言:en

前往原址学习

简介

我们引入了一种快速的低秩分解框架,用于压缩大型语言模型,能够在不重新训练的情况下快速压缩数十亿参数的模型。与现有基于分解的方法仅在原始输入上进行优化不同,我们忽略了从

返回教程库 · 察元AI产品家族