察元AI教程库 · 文章 · 提示词

一个神经元足以绕过大型语言模型的安全对齐

语言模型中的安全对齐通过两种机制不同的系统实现:拒绝神经元决定是否表达有害知识,概念神经元编码有害知识本身。通过针对每个系统中的单个神经元进行操作,我们展示了两种方向的对齐

作者:Hamid Kazemi, Atoosa Chegini, Maria Safi · 语言:en

前往原址学习

简介

语言模型中的安全对齐通过两种机制不同的系统实现:拒绝神经元决定是否表达有害知识,概念神经元编码有害知识本身。通过针对每个系统中的单个神经元进行操作,我们展示了两种方向的对齐

返回教程库 · 察元AI产品家族