察元AI教程库 · 文章 · 微调

通过任务相关特征增强的低秩适应用于语言模型微调

以参数高效的方式对预训练的大语言模型（LLMs）进行微调已被广泛研究，因其高效性和有效性。LoRA是其中最广泛使用的方法之一，它假设优化过程本质上是低维的。尽管LoRA已经展示了出色的性能，

作者:Changqun Li, Chaofan Ding, Kexin Luan · 语言:en

前往原址学习

简介

以参数高效的方式对预训练的大语言模型（LLMs）进行微调已被广泛研究，因其高效性和有效性。LoRA是其中最广泛使用的方法之一，它假设优化过程本质上是低维的。尽管LoRA已经展示了出色的性能，

返回教程库 · 察元AI产品家族