察元AI教程库 · 文章 · 多模态
针对大型语言模型(LLMs)的参数高效微调(PEFT)主要有两种技术。低秩适应(LoRA)在LLM层间引入额外权重,软提示(Soft Prompting)则在LLM输入中引入额外的微调专用原始令牌。然而,两者都需要
作者:Michal Chudoba, Sergey Alyaev, Petra Galuscakova · 语言:en
针对大型语言模型(LLMs)的参数高效微调(PEFT)主要有两种技术。低秩适应(LoRA)在LLM层间引入额外权重,软提示(Soft Prompting)则在LLM输入中引入额外的微调专用原始令牌。然而,两者都需要