察元AI教程库 · 文章 · 微调
大语言模型在持续微调过程中灾难性遗忘的机制分析
大型语言模型(LLMs)在目标任务上的顺序微调常引发灾难性遗忘,即新获得的特定技能会损害原有能力。本文系统性地比较了二十个顶级模型在灾难性遗忘方面的表现
作者:Gustav Olaf Yunus Laitinen-Fredriksson Lundstrom-Imanov · 语言:en
前往原址学习
简介
大型语言模型(LLMs)在目标任务上的顺序微调常引发灾难性遗忘,即新获得的特定技能会损害原有能力。本文系统性地比较了二十个顶级模型在灾难性遗忘方面的表现
返回教程库 · 察元AI产品家族