察元AI教程库 · 文章 · 微调

改进大型语言模型的监督微调以缓解灾难性遗忘

监督微调(SFT)是增强大型语言模型(LLMs)指令遵循能力并使其适应特定领域的重要步骤。然而,SFT通常会导致模型的泛化能力下降,这种现象被称为灾难性遗忘。这

作者:Fei Ding, Baiqiao Wang · 语言:en

前往原址学习

简介

监督微调(SFT)是增强大型语言模型(LLMs)指令遵循能力并使其适应特定领域的重要步骤。然而,SFT通常会导致模型的泛化能力下降,这种现象被称为灾难性遗忘。这

返回教程库 · 察元AI产品家族