察元AI教程库 · 文章 · 微调

DataRx:一种缺失感知的采样方法,用于更安全的大型语言模型任务特定微调

针对特定任务的微调可以提升大型语言模型(LLMs)在下游任务中的表现。然而,我们的研究发现,特定任务微调也可能削弱对齐LLMs的安全护栏。一种广泛采用的策略是在微调过程中保留安全性的方法是

作者:Junbo Zhang, Qianli Zhou, Xinyang Deng · 语言:en

前往原址学习

简介

针对特定任务的微调可以提升大型语言模型(LLMs)在下游任务中的表现。然而,我们的研究发现,特定任务微调也可能削弱对齐LLMs的安全护栏。一种广泛采用的策略是在微调过程中保留安全性的方法是

返回教程库 · 察元AI产品家族