察元AI教程库 · 文章 · 微调
SEAL:通过双层数据选择实现安全增强的对齐LLM微调
在特定任务数据上进行微调以提升下游性能是利用大型语言模型(LLMs)的关键步骤。然而,先前的研究表明,对模型进行微调,无论是针对对抗样本还是良性数据,都可能严重削弱模型原有的能力。
作者:Han Shen, Pin-Yu Chen, Payel Das · 语言:en
前往原址学习
简介
在特定任务数据上进行微调以提升下游性能是利用大型语言模型(LLMs)的关键步骤。然而,先前的研究表明,对模型进行微调,无论是针对对抗样本还是良性数据,都可能严重削弱模型原有的能力。
返回教程库 · 察元AI产品家族