察元AI教程库 · 文章 · 大模型

通过决策表示转换理解分层剪枝大型语言模型中的性能崩溃

层剪枝能有效降低大型语言模型（LLM）的计算成本，但通常会引发突然的性能崩溃。现有的基于表示的分析难以解释这一机制。我们提出通过决策表示来研究剪枝问题。聚焦于多选任务，

作者:Boyu Shi, Chang Liu, ChuanBao Gao · 语言:en

前往原址学习

简介

层剪枝能有效降低大型语言模型（LLM）的计算成本，但通常会引发突然的性能崩溃。现有的基于表示的分析难以解释这一机制。我们提出通过决策表示来研究剪枝问题。聚焦于多选任务，

返回教程库 · 察元AI产品家族