察元AI教程库 · 文章 · 微调
LoRA的链式结构:通过残差学习实现语言模型的高效微调
微调是将预训练大型语言模型适应特定任务的主要方法。随着模型规模和任务多样性的增加,参数高效的微调方法变得至关重要。其中最广泛使用的方法家族之一是低秩适应
作者:Wenhan Xia, Chengwei Qin, Elad Hazan · 语言:en
前往原址学习
简介
微调是将预训练大型语言模型适应特定任务的主要方法。随着模型规模和任务多样性的增加,参数高效的微调方法变得至关重要。其中最广泛使用的方法家族之一是低秩适应
返回教程库 · 察元AI产品家族