察元AI教程库 · 文章 · 微调

MiCA 学习的知识多于 LoRA 和全量微调

最小成分适应(MiCA)是一种新颖的参数高效微调方法,专注于对模型表示中未充分利用的子空间进行适应。与传统的低秩适应(LoRA)方法不同,后者针对的是主导子空间,MiCA利用Sine

作者:Sten Rüdiger, Sebastian Raschka · 语言:en

前往原址学习

简介

最小成分适应(MiCA)是一种新颖的参数高效微调方法,专注于对模型表示中未充分利用的子空间进行适应。与传统的低秩适应(LoRA)方法不同,后者针对的是主导子空间,MiCA利用Sine

返回教程库 · 察元AI产品家族