察元AI教程库 · 文章 · 微调

Token Buncher:保护大语言模型免受有害强化学习微调

随着大型语言模型(LL )能力的不断提升,通过微调引发的有害滥用风险也在增加。尽管大多数先前的研究假设攻击者依赖于监督微调(SFT)进行此类滥用,但我们系统地证明了强化学习(RL)能够实现对抗性

作者:Weitao Feng, Lixu Wang, Peizhuo Lv · 语言:en

前往原址学习

简介

随着大型语言模型(LL )能力的不断提升,通过微调引发的有害滥用风险也在增加。尽管大多数先前的研究假设攻击者依赖于监督微调(SFT)进行此类滥用,但我们系统地证明了强化学习(RL)能够实现对抗性

返回教程库 · 察元AI产品家族