察元AI教程库 · 文章 · 微调

HyperSafe:细调语言模型的推理时安全恢复

大型语言模型中的安全对齐在微调过程中可能变得脆弱,因为即使是良性任务适应也可能增加有害的合规性。现有防御方法主要分为两个方向:要么在微调过程中或之后通过重新训练或权重修改来干预,这些方法可能成本高昂

作者:Aznaur Aliev, Carlos Hinojosa, Abdelrahman Eldesokey · 语言:en

前往原址学习

简介

大型语言模型中的安全对齐在微调过程中可能变得脆弱,因为即使是良性任务适应也可能增加有害的合规性。现有防御方法主要分为两个方向:要么在微调过程中或之后通过重新训练或权重修改来干预,这些方法可能成本高昂

返回教程库 · 察元AI产品家族