察元AI教程库 · 文章 · 微调

高秩结构调制用于参数高效的微调

随着模型参数数量的增加，参数高效微调（PE PEFT）已成为定制预训练大型语言模型的首选方法。低秩适应（LoRA）采用低秩更新方法来模拟全参数微调，被广泛用于减少资源消耗。

作者:Yongkang Liu, Xing Li, Mengjie Zhao · 语言:en

前往原址学习

简介

随着模型参数数量的增加，参数高效微调（PE PEFT）已成为定制预训练大型语言模型的首选方法。低秩适应（LoRA）采用低秩更新方法来模拟全参数微调，被广泛用于减少资源消耗。

返回教程库 · 察元AI产品家族