察元AI教程库 · 文章 · 微调

LoCO:低秩组合旋转微调

参数高效的微调(PEFT)已成为适应大规模基础模型在自然语言处理和计算机视觉领域的重要技术。尽管现有方法如低秩适应通过低秩权重更新实现参数效率,但它们仍存在局限性。

作者:An Nguyen, Jaesik Choi, Anh Tong · 语言:en

前往原址学习

简介

参数高效的微调(PEFT)已成为适应大规模基础模型在自然语言处理和计算机视觉领域的重要技术。尽管现有方法如低秩适应通过低秩权重更新实现参数效率,但它们仍存在局限性。

返回教程库 · 察元AI产品家族