察元AI教程库 · 文章 · 大模型

Transformer语言模型中关系解码的线性性

Transformer语言模型（LMs）中编码的知识可以以关系的形式表达：词与其同义词之间的关系、实体与其属性之间的关系等。我们表明，对于一组关系，这种计算可以很好地用单次线性变换来近似

作者:Evan Hernandez, Arnab Sen Sharma, Tal Haklay · 语言:en

简介