察元AI教程库 · 文章 · 微调

用于安全LLM微调的梯度手术

作为服务的微调引入了一个关键漏洞,即少数恶意示例混入用户微调数据集,可能会破坏大型语言模型(LLMs)的安全对齐。尽管公认的一种范式将安全微调视为一个多目标优化问题,但

作者:Biao Yi, Jiahao Li, Baolei Zhang · 语言:en

前往原址学习

简介

作为服务的微调引入了一个关键漏洞,即少数恶意示例混入用户微调数据集,可能会破坏大型语言模型(LLMs)的安全对齐。尽管公认的一种范式将安全微调视为一个多目标优化问题,但

返回教程库 · 察元AI产品家族