察元AI教程库 · 文章 · 微调
MiCA 学习的知识多于 LoRA 和全量微调
最小成分适应(MiCA)是一种新颖的参数高效微调方法,专注于对模型表示中未充分利用的子空间进行适应。与传统的低秩适应(LoRA)方法不同,后者针对的是主导子空间,MiCA利用Sine
作者:Sten Rüdiger, Sebastian Raschka · 语言:en
前往原址学习
简介
最小成分适应(MiCA)是一种新颖的参数高效微调方法,专注于对模型表示中未充分利用的子空间进行适应。与传统的低秩适应(LoRA)方法不同,后者针对的是主导子空间,MiCA利用Sine
返回教程库 · 察元AI产品家族