察元AI教程库 · 文章 · 微调

在微调预训练的大语言模型中,稀疏就足够了

随着预训练-微调范式的普及,如何高效地将预训练模型适应下游任务成为一个引人关注的问题。参数高效微调(PEFT)方法被提出以实现低成本的适应。尽管PEFT已显示出有效性和

作者:Weixi Song, Zuchao Li, Lefei Zhang · 语言:en

前往原址学习

简介

随着预训练-微调范式的普及,如何高效地将预训练模型适应下游任务成为一个引人关注的问题。参数高效微调(PEFT)方法被提出以实现低成本的适应。尽管PEFT已显示出有效性和

返回教程库 · 察元AI产品家族