察元AI教程库 · 文章 · 微调
迈向自适应前缀微调:用于参数高效的大型语言模型微调
在各种下游任务上对大型预训练语言模型进行全参数微调是极其昂贵的。因此,参数高效的微调方法受到了关注,该方法仅优化少量特定任务的参数,而预训练模型其余部分保持冻结。本文聚焦于
作者:Zhen-Ru Zhang, Chuanqi Tan, Haiyang Xu · 语言:en
前往原址学习
简介
在各种下游任务上对大型预训练语言模型进行全参数微调是极其昂贵的。因此,参数高效的微调方法受到了关注,该方法仅优化少量特定任务的参数,而预训练模型其余部分保持冻结。本文聚焦于
返回教程库 · 察元AI产品家族