察元AI教程库 · 文章 · 微调

MeTA-LoRA:面向大型语言模型的高效多任务微调

低秩适应(LoRA)已成为适应大语言模型(LLMs)到下游任务的最广泛使用的参数高效微调(PEFT)方法之一。尽管在单任务设置中非常有效,但在复杂多任务场景中,它难以高效利用任务间的知识。

作者:Bo Cheng, Xu Wang, Jinda Liu · 语言:en

前往原址学习

简介

低秩适应(LoRA)已成为适应大语言模型(LLMs)到下游任务的最广泛使用的参数高效微调(PEFT)方法之一。尽管在单任务设置中非常有效,但在复杂多任务场景中,它难以高效利用任务间的知识。

返回教程库 · 察元AI产品家族