察元AI教程库 · 文章 · 微调

面向大型语言模型的稀疏感知低秩表示用于高效微调

适应大型预训练语言模型以处理下游任务通常涉及微调数百万个参数或部署昂贵的密集权重更新，这阻碍了它们在资源受限环境中的应用。低秩适应（LoRA）通过因子化权重更新来减少可训练参数

作者:Longteng Zhang, Sen Wu, Shuai Hou · 语言:en

简介