察元AI教程库 · 文章 · 大模型

Transformer语言模型中的注意力白熊效应

指令式抑制被广泛用于防止语言模型生成禁止内容，但其是否减少内部表示或仅仅是抑制表达，仍不清楚。我们通过表示探针、注意力分析等方法研究了这个问题

作者:Rebecca Ramnauth, Brian Scassellati · 语言:en

前往原址学习

简介

指令式抑制被广泛用于防止语言模型生成禁止内容，但其是否减少内部表示或仅仅是抑制表达，仍不清楚。我们通过表示探针、注意力分析等方法研究了这个问题

返回教程库 · 察元AI产品家族