察元AI教程库 · 文章 · 大模型

MI-PRUN:通过互信息优化大型语言模型剪枝

大型语言模型(LLMs)已成为各个领域不可或缺的工具,但这也带来了巨大的计算和内存资源消耗。模型剪枝通过移除模型中的冗余部分来解决这一问题。特别是,块级剪枝可以实现显著的压缩

作者:Hao Zhang, Zhibin Zhang, Guangxin Wu · 语言:en

前往原址学习

简介

大型语言模型(LLMs)已成为各个领域不可或缺的工具,但这也带来了巨大的计算和内存资源消耗。模型剪枝通过移除模型中的冗余部分来解决这一问题。特别是,块级剪枝可以实现显著的压缩

返回教程库 · 察元AI产品家族