察元AI教程库 · 文章 · 大模型
最近的研究表明,将稀疏自编码器(SAE)应用于大语言模型(LLM)层时,其神经元对应于可解释的概念。这些SAE神经元可以被修改以对齐生成输出,但仅限于预先确定的主题,并且需要一定的参数调整。我们的方法利用
作者:Ananya Joshi, Celia Cintas, Skyler Speakman · 语言:en
最近的研究表明,将稀疏自编码器(SAE)应用于大语言模型(LLM)层时,其神经元对应于可解释的概念。这些SAE神经元可以被修改以对齐生成输出,但仅限于预先确定的主题,并且需要一定的参数调整。我们的方法利用