察元AI教程库 · 文章 · 大模型

NIRVANA：面向大语言模型压缩的结构化剪枝再思考

尽管结构化剪枝为加速大型语言模型（LLM）推理提供了一条高效途径，但现有方法通常会导致显著的性能下降，并且需要重新训练来恢复其能力。为克服这些障碍，我们提出了NIRVAN

作者:Mengting Ai, Tianxin Wei, Sirui Chen · 语言:en

简介