察元AI教程库 · 文章 · 微调

使用适配器进行参数高效的微调

在语言模型微调领域，传统的做法如领域自适应预训练（DAPT）和任务自适应预训练（TAPT）虽然有效，但计算成本高。本研究引入了一种利用UniPELT框架作为基础的新型适应方法

作者:Keyu Chen, Yuan Pang, Zi Yang · 语言:en

前往原址学习

简介

在语言模型微调领域，传统的做法如领域自适应预训练（DAPT）和任务自适应预训练（TAPT）虽然有效，但计算成本高。本研究引入了一种利用UniPELT框架作为基础的新型适应方法

返回教程库 · 察元AI产品家族