察元AI教程库 · 文章 · 微调

防止灾难性遗忘：面向更安全语言模型微调的基于行为的采样

大型语言模型（LLMs）在微调于良性数据时，常常会丢失原有的安全行为，这种现象被称为灾难性遗忘。先前的研究表明，添加随机的安全示例可以缓解这一现象，但尚不清楚哪些示例最为有效。我们提出了一种行为

作者:Anh Pham, Mihir Thalanki, Michael Sun · 语言:en

前往原址学习

简介

大型语言模型（LLMs）在微调于良性数据时，常常会丢失原有的安全行为，这种现象被称为灾难性遗忘。先前的研究表明，添加随机的安全示例可以缓解这一现象，但尚不清楚哪些示例最为有效。我们提出了一种行为

返回教程库 · 察元AI产品家族