察元AI教程库 · 文章 · 微调

Solo Connection:一种适用于Transformer的参数高效微调技术

参数高效的微调(PEFT)是一种灵活且可扩展的大型语言模型(LLM)适应新任务的方法。其中最突出的PEFT方法——低秩适应(LoRA)——主要关注调整单个解码器块内的注意力权重矩阵

作者:Harsh Nilesh Pathak, Randy Paffenroth · 语言:en

前往原址学习

简介

参数高效的微调(PEFT)是一种灵活且可扩展的大型语言模型(LLM)适应新任务的方法。其中最突出的PEFT方法——低秩适应(LoRA)——主要关注调整单个解码器块内的注意力权重矩阵

返回教程库 · 察元AI产品家族