察元AI教程库 · 文章 · 微调

大型语言模型参数高效微调的逐步去掩码方法

在下游任务上对大型语言模型(LLMs)进行微调需要大量计算资源。选择性PEFT,作为参数高效微调(PEFT)方法的一种,旨在通过选择性地仅微调模型参数的小部分来缓解这些计算挑战。

作者:Aradhye Agarwal, Suhas K Ramesh, Ayan Sengupta · 语言:en

前往原址学习

简介

在下游任务上对大型语言模型(LLMs)进行微调需要大量计算资源。选择性PEFT,作为参数高效微调(PEFT)方法的一种,旨在通过选择性地仅微调模型参数的小部分来缓解这些计算挑战。

返回教程库 · 察元AI产品家族