察元AI教程库 · 文章 · 微调
改进大型语言模型的监督微调以缓解灾难性遗忘
监督微调(SFT)是增强大型语言模型(LLMs)指令遵循能力并使其适应特定领域的重要步骤。然而,SFT通常会导致模型的泛化能力下降,这种现象被称为灾难性遗忘。这
作者:Fei Ding, Baiqiao Wang · 语言:en
前往原址学习
简介
监督微调(SFT)是增强大型语言模型(LLMs)指令遵循能力并使其适应特定领域的重要步骤。然而,SFT通常会导致模型的泛化能力下降,这种现象被称为灾难性遗忘。这
返回教程库 · 察元AI产品家族