察元AI教程库 · 文章 · 大模型
我们识别出当前大型语言模型（LLM）对齐中存在的结构性弱点：现代的拒绝机制是“失败开放”的。尽管现有方法在多个潜在特征中编码拒绝行为，但通过基于提示的越狱攻击抑制单一主导特征，会导致对齐失效
作者:Zachary Coalson, Beth Sohler, Aiden Gabriel · 语言:en
我们识别出当前大型语言模型（LLM）对齐中存在的结构性弱点：现代的拒绝机制是“失败开放”的。尽管现有方法在多个潜在特征中编码拒绝行为，但通过基于提示的越狱攻击抑制单一主导特征，会导致对齐失效