察元AI教程库 · 文章 · 大模型
Transformer在计算语言学中的几乎所有最先进的语言模型中都起着核心作用,但其作为人类句子处理模型的认知充分性仍存在争议。在本研究中,我们使用基于惊讶值的链接机制,系统性地评估了11个自回归Transformer
作者:Titus von der Malsburg, Sebastian Padó · 语言:en
Transformer在计算语言学中的几乎所有最先进的语言模型中都起着核心作用,但其作为人类句子处理模型的认知充分性仍存在争议。在本研究中,我们使用基于惊讶值的链接机制,系统性地评估了11个自回归Transformer