察元AI教程库 · 文章 · 微调

面向设备的个性化协同微调大型语言模型

我们探讨了在设备上使用自监督协作微调大型语言模型，且本地数据有限的情况。借鉴协作学习社区的经验，我们提出了三种不同的信任加权梯度聚合方案：基于权重相似性的、基于预测相似性的

作者:Nicolas Wagner, Dongyang Fan, Martin Jaggi · 语言:en

简介