察元AI教程库 · 文章 · 微调
参数高效的微调方法(如LoRA)已经改变了大型自回归语言模型的适应方式,使其能够以大幅减少可训练参数的方式实现任务特定的定制。然而,这些方法尚未成功扩展到基于扩散的语言模型。
作者:Iman Khazrak, Narges Nejad, Mohammadhossein Homaei · 语言:en
参数高效的微调方法(如LoRA)已经改变了大型自回归语言模型的适应方式,使其能够以大幅减少可训练参数的方式实现任务特定的定制。然而,这些方法尚未成功扩展到基于扩散的语言模型。