察元AI教程库 · 文章 · 微调

CURLoRA：稳定的大语言模型持续微调及灾难性遗忘缓解

本文介绍了CURLoRA，一种基于低秩适应（LoRA）的上下文矩阵分解的新型大型语言模型（LLMs）微调方法。我们的方法解决了LLM微调中的两个关键挑战：在持续学习过程中缓解灾难性遗忘。

作者:Muhammad Fawi · 语言:en

前往原址学习

简介

本文介绍了CURLoRA，一种基于低秩适应（LoRA）的上下文矩阵分解的新型大型语言模型（LLMs）微调方法。我们的方法解决了LLM微调中的两个关键挑战：在持续学习过程中缓解灾难性遗忘。

返回教程库 · 察元AI产品家族