察元AI教程库 · 文章 · 大模型

Thanos:一种基于块的剪枝算法,用于高效压缩大型语言模型

本文提出了Thanos,一种新颖的权重剪枝算法,旨在通过移除冗余权重来减少大型语言模型(LLMs)的内存占用并提高计算效率,同时保持准确性。Thanos引入了一种分块剪枝策略,结合自适应掩码

作者:Ivan Ilin, Peter Richtarik · 语言:en

前往原址学习

简介

本文提出了Thanos,一种新颖的权重剪枝算法,旨在通过移除冗余权重来减少大型语言模型(LLMs)的内存占用并提高计算效率,同时保持准确性。Thanos引入了一种分块剪枝策略,结合自适应掩码

返回教程库 · 察元AI产品家族