察元AI教程库 · 文章 · 大模型
AA-SVD:大型语言模型压缩的锚定与自适应SVD
我们引入了一种快速的低秩分解框架,用于压缩大型语言模型,能够在不重新训练的情况下快速压缩数十亿参数的模型。与现有基于分解的方法仅在原始输入上进行优化不同,我们忽略了从
作者:Atul Kumar Sinha, François Fleuret · 语言:en
前往原址学习
简介
我们引入了一种快速的低秩分解框架,用于压缩大型语言模型,能够在不重新训练的情况下快速压缩数十亿参数的模型。与现有基于分解的方法仅在原始输入上进行优化不同,我们忽略了从
返回教程库 · 察元AI产品家族