察元AI教程库 · 文章 · 微调
尽管参数高效的微调(PEFT)技术如低秩适应(LoRA)为大型语言模型(LLMs)提供了计算高效的适应方式,但其实际部署通常假设存在集中式数据和训练环境。然而,现实场景中经常涉及分散的数据和训练环境。
作者:Sajjad Ghiasvand, Mahnoosh Alizadeh, Ramtin Pedarsani · 语言:en
尽管参数高效的微调(PEFT)技术如低秩适应(LoRA)为大型语言模型(LLMs)提供了计算高效的适应方式,但其实际部署通常假设存在集中式数据和训练环境。然而,现实场景中经常涉及分散的数据和训练环境。