察元AI教程库 · 文章 · 微调

在异构任务和客户端资源下，大型语言模型的联邦微调

联邦学习（FL）最近被应用于大型语言模型（LLMs）的参数高效微调。尽管前景广阔，但因其客户端资源和数据分布的异构性而提出了重大挑战。本研究引入了FlexLoRA，一种简单而有效的聚合方法

作者:Jiamu Bai, Daoyuan Chen, Bingchen Qian · 语言:en

前往原址学习

简介

联邦学习（FL）最近被应用于大型语言模型（LLMs）的参数高效微调。尽管前景广阔，但因其客户端资源和数据分布的异构性而提出了重大挑战。本研究引入了FlexLoRA，一种简单而有效的聚合方法

返回教程库 · 察元AI产品家族