察元AI教程库 · 文章 · 微调
大型语言模型中的安全对齐在微调过程中可能变得脆弱,因为即使是良性任务适应也可能增加有害的合规性。现有防御方法主要分为两个方向:要么在微调过程中或之后通过重新训练或权重修改来干预,这些方法可能成本高昂
作者:Aznaur Aliev, Carlos Hinojosa, Abdelrahman Eldesokey · 语言:en
大型语言模型中的安全对齐在微调过程中可能变得脆弱,因为即使是良性任务适应也可能增加有害的合规性。现有防御方法主要分为两个方向:要么在微调过程中或之后通过重新训练或权重修改来干预,这些方法可能成本高昂