察元AI教程库 · 文章 · 微调

LoRA-Diffusion:通过低秩轨迹分解实现的参数高效微调

参数高效的微调方法(如LoRA)已经改变了大型自回归语言模型的适应方式,使其能够以大幅减少可训练参数的方式实现任务特定的定制。然而,这些方法尚未成功扩展到基于扩散的语言模型。

作者:Iman Khazrak, Narges Nejad, Mohammadhossein Homaei · 语言:en

前往原址学习

简介

参数高效的微调方法(如LoRA)已经改变了大型自回归语言模型的适应方式,使其能够以大幅减少可训练参数的方式实现任务特定的定制。然而,这些方法尚未成功扩展到基于扩散的语言模型。

返回教程库 · 察元AI产品家族