察元AI教程库 · 文章 · 大模型

SVD-Surgeon：大语言模型压缩的最优奇异值手术

大型语言模型（LLMs）在广泛任务上表现出色，但其部署受到大量内存和计算需求的限制。通过奇异值分解（SVD）进行低秩压缩是一种有效方法，但现有方法主要关注如何进行

作者:Mahmoud Safari, Frank Hutter · 语言:en

前往原址学习

简介

大型语言模型（LLMs）在广泛任务上表现出色，但其部署受到大量内存和计算需求的限制。通过奇异值分解（SVD）进行低秩压缩是一种有效方法，但现有方法主要关注如何进行

返回教程库 · 察元AI产品家族