察元AI教程库 · 文章 · 微调
量子增强的大语言模型高效微调
低秩适应(LoRA)通过低秩矩阵近似实现了对预训练语言模型的高效微调,在多种场景中表现出有效性。然而,在复杂任务或高秩依赖设置中,其表示能力受限,可能限制模型
作者:Xiaofei Kong, Lei Li, Zhaoyun Chen · 语言:en
前往原址学习
简介
低秩适应(LoRA)通过低秩矩阵近似实现了对预训练语言模型的高效微调,在多种场景中表现出有效性。然而,在复杂任务或高秩依赖设置中,其表示能力受限,可能限制模型
返回教程库 · 察元AI产品家族