察元AI教程库 · 文章 · 微调
针对特定任务的微调可以提升大型语言模型(LLMs)在下游任务中的表现。然而,我们的研究发现,特定任务微调也可能削弱对齐LLMs的安全护栏。一种广泛采用的策略是在微调过程中保留安全性的方法是
作者:Junbo Zhang, Qianli Zhou, Xinyang Deng · 语言:en
针对特定任务的微调可以提升大型语言模型(LLMs)在下游任务中的表现。然而,我们的研究发现,特定任务微调也可能削弱对齐LLMs的安全护栏。一种广泛采用的策略是在微调过程中保留安全性的方法是