察元AI教程库 · 文章 · 微调
在联邦设置中对大型语言模型（LLMs）进行微调，能够实现隐私保护的适应，但会因模型聚合而产生跨客户端干扰。现有的联邦LoRA微调方法主要基于FedAvg，难以应对数据异质性，导致有害的跨客户端干扰。
作者:Jieming Bian, Lei Wang, Letian Zhang · 语言:en
在联邦设置中对大型语言模型（LLMs）进行微调，能够实现隐私保护的适应，但会因模型聚合而产生跨客户端干扰。现有的联邦LoRA微调方法主要基于FedAvg，难以应对数据异质性，导致有害的跨客户端干扰。