察元AI教程库 · 文章 · 微调

大语言模型在持续微调过程中灾难性遗忘的机制分析

大型语言模型(LLMs)在目标任务上的顺序微调常引发灾难性遗忘,即新获得的特定技能会损害原有能力。本文系统性地比较了二十个顶级模型在灾难性遗忘方面的表现

作者:Gustav Olaf Yunus Laitinen-Fredriksson Lundstrom-Imanov · 语言:en

前往原址学习

简介

大型语言模型(LLMs)在目标任务上的顺序微调常引发灾难性遗忘,即新获得的特定技能会损害原有能力。本文系统性地比较了二十个顶级模型在灾难性遗忘方面的表现

返回教程库 · 察元AI产品家族