察元AI教程库 · 文章 · 微调

LoRA的链式结构:通过残差学习实现语言模型的高效微调

微调是将预训练大型语言模型适应特定任务的主要方法。随着模型规模和任务多样性的增加,参数高效的微调方法变得至关重要。其中最广泛使用的方法家族之一是低秩适应

作者:Wenhan Xia, Chengwei Qin, Elad Hazan · 语言:en

前往原址学习

简介

微调是将预训练大型语言模型适应特定任务的主要方法。随着模型规模和任务多样性的增加,参数高效的微调方法变得至关重要。其中最广泛使用的方法家族之一是低秩适应

返回教程库 · 察元AI产品家族