察元AI教程库 · 文章 · 大模型

句子理解中基于Transformer语言模型的协议现象分析：相似性干扰对惊奇度和注意力的影响

我们提出了一种关于基于相似性干扰效应的新解释，该解释基于从预训练大规模Transformer模型GPT-2计算出的惊讶值。具体而言，我们展示了动词或反身代词的惊讶值预示了句法结构的干扰效应

作者:Soo Hyun Ryu, Richard L. Lewis · 语言:en

简介