察元AI教程库 · 文章 · 微调

RoseLoRA:基于行和列稀疏低秩适配的预训练语言模型知识编辑与微调

预训练语言模型通过在大规模语料库上训练,展现出在多种NLP任务中的强大泛化能力。对这些模型进行特定任务微调通常涉及更新所有参数,这会带来资源消耗。参数高效的微调(PEFT)方法,如

作者:Haoyu Wang, Tianci Liu, Ruirui Li · 语言:en

前往原址学习

简介

预训练语言模型通过在大规模语料库上训练,展现出在多种NLP任务中的强大泛化能力。对这些模型进行特定任务微调通常涉及更新所有参数,这会带来资源消耗。参数高效的微调(PEFT)方法,如

返回教程库 · 察元AI产品家族