察元AI教程库 · 文章 · 微调

联邦微调中低秩适配器的聚合

对大型语言模型进行微调需要大量计算和内存资源,因此成本高昂。在联邦数据集上训练时,还需要增加通信开销。因此,参数高效的微调方法(PEFT)正变得越来越

作者:Evelyn Trautmann, Ian Hales, Martin F. Volk · 语言:en

前往原址学习

简介

对大型语言模型进行微调需要大量计算和内存资源,因此成本高昂。在联邦数据集上训练时,还需要增加通信开销。因此,参数高效的微调方法(PEFT)正变得越来越

返回教程库 · 察元AI产品家族