察元AI教程库 · 文章 · 微调

无需微调的预训练语言模型剪枝

为解决预训练语言模型（PLMs）的过参数化问题，剪枝被广泛用作一种简单直接的压缩方法，通过直接移除不重要的权重来实现。先前的一阶方法成功地将PLMs压缩到极高的稀疏度，且性能表现

作者:Ting Jiang, Deqing Wang, Fuzhen Zhuang · 语言:en

前往原址学习

简介

为解决预训练语言模型（PLMs）的过参数化问题，剪枝被广泛用作一种简单直接的压缩方法，通过直接移除不重要的权重来实现。先前的一阶方法成功地将PLMs压缩到极高的稀疏度，且性能表现

返回教程库 · 察元AI产品家族