察元AI教程库 · 文章 · 微调

LoRA与全量微调:等价性的幻觉

微调是将预训练的大语言模型适应下游任务的关键范式。近年来,低秩适应(LoRA)等方法已被证明能以极小的可训练参数有效微调LLMs。但,这些学习到的解决方案是否真正等价

作者:Reece Shuttleworth, Jacob Andreas, Antonio Torralba · 语言:en

前往原址学习

简介

微调是将预训练的大语言模型适应下游任务的关键范式。近年来,低秩适应(LoRA)等方法已被证明能以极小的可训练参数有效微调LLMs。但,这些学习到的解决方案是否真正等价

返回教程库 · 察元AI产品家族