察元AI教程库 · 文章 · 微调

GR-SAP:生成式重放用于微调过程中的安全对齐保持

最近的研究表明,即使看似非对抗性的微调也可能轻易破坏大型语言模型(LLMs)的安全对齐。为了在微调过程中保持安全对齐,一种广泛使用的方法是通过混合原始a来联合优化安全性和任务目标

作者:Zhouxiang Fang, Jiawei Zhou, Hanjie Chen · 语言:en

前往原址学习

简介

最近的研究表明,即使看似非对抗性的微调也可能轻易破坏大型语言模型(LLMs)的安全对齐。为了在微调过程中保持安全对齐,一种广泛使用的方法是通过混合原始a来联合优化安全性和任务目标

返回教程库 · 察元AI产品家族