察元AI教程库 · 文章 · 大模型
PASER:训练后数据选择用于高效剪枝大语言模型的恢复
模型剪枝是一种有效压缩大型语言模型(LLM)的方法。然而,这一过程通常会导致模型能力显著下降。尽管人们普遍采用指令微调等后训练技术来恢复模型性能,但现有方法往往
作者:Bowei He, Lihao Yin, Hui-Ling Zhen · 语言:en
前往原址学习
简介
模型剪枝是一种有效压缩大型语言模型(LLM)的方法。然而,这一过程通常会导致模型能力显著下降。尽管人们普遍采用指令微调等后训练技术来恢复模型性能,但现有方法往往
返回教程库 · 察元AI产品家族