察元AI教程库 · 文章 · 微调

HydraLoRA：一种用于高效微调的非对称LoRA架构

通过微调来适应大型语言模型（LLMs）的新任务已通过引入参数高效微调（PEFT）技术（如LoRA）变得更加高效。然而，这些方法通常在涉及复杂场景时表现不佳，尤其与全量微调相比表现较差。

作者:Chunlin Tian, Zhan Shi, Zhijiang Guo · 语言:en

前往原址学习

简介

通过微调来适应大型语言模型（LLMs）的新任务已通过引入参数高效微调（PEFT）技术（如LoRA）变得更加高效。然而，这些方法通常在涉及复杂场景时表现不佳，尤其与全量微调相比表现较差。

返回教程库 · 察元AI产品家族