察元AI教程库 · 文章 · 微调

ShareLoRA：通过共享低秩适应实现参数高效且稳健的大型语言模型微调

本文介绍了一种名为“共享低秩适应”（ShareLoRA）的大型语言模型（LLM）微调技术，该技术在参数效率、适应性和鲁棒性之间取得了平衡，同时不牺牲性能。通过战略性地共享低秩权重矩阵，

作者:Yurun Song, Junchen Zhao, Ian G. Harris · 语言:en

前往原址学习

简介

本文介绍了一种名为“共享低秩适应”（ShareLoRA）的大型语言模型（LLM）微调技术，该技术在参数效率、适应性和鲁棒性之间取得了平衡，同时不牺牲性能。通过战略性地共享低秩权重矩阵，

返回教程库 · 察元AI产品家族