察元AI教程库 · 文章 · 微调
使用不可信数据进行大语言模型（LLMs）微调会使模型面临后门攻击，即被污染的样本会引发目标性错误行为。现有样本过滤防御依赖聚类，但需要足够数据，且在极端污染比例下可能失效。我们提出GradSentry（梯度）
作者:Haodong Zhao, Tianyi Xu, Tianhang Zhao · 语言:en
使用不可信数据进行大语言模型（LLMs）微调会使模型面临后门攻击，即被污染的样本会引发目标性错误行为。现有样本过滤防御依赖聚类，但需要足够数据，且在极端污染比例下可能失效。我们提出GradSentry（梯度）