察元AI教程库 · 文章 · 微调
对视觉-语言模型（VLMs）如CLIP进行微调通常会导致预训练知识的灾难性遗忘。先前的研究主要旨在缓解适应过程中的遗忘问题；然而，这种遗忘在该过程中往往不可避免。我们引入了一种新范式，即持续微调
作者:Wenqing Wang, Da Li, Xiatian Zhu · 语言:en
对视觉-语言模型（VLMs）如CLIP进行微调通常会导致预训练知识的灾难性遗忘。先前的研究主要旨在缓解适应过程中的遗忘问题；然而，这种遗忘在该过程中往往不可避免。我们引入了一种新范式，即持续微调