察元AI教程库 · 文章 · 微调

大型语言模型的去中心化低秩微调

尽管参数高效的微调(PEFT)技术如低秩适应(LoRA)为大型语言模型(LLMs)提供了计算高效的适应方式,但其实际部署通常假设存在集中式数据和训练环境。然而,现实场景中经常涉及分散的数据和训练环境。

作者:Sajjad Ghiasvand, Mahnoosh Alizadeh, Ramtin Pedarsani · 语言:en

前往原址学习

简介

尽管参数高效的微调(PEFT)技术如低秩适应(LoRA)为大型语言模型(LLMs)提供了计算高效的适应方式,但其实际部署通常假设存在集中式数据和训练环境。然而,现实场景中经常涉及分散的数据和训练环境。

返回教程库 · 察元AI产品家族