察元AI教程库 · 文章 · 大模型

GiLT：通过依赖图增强Transformer语言模型

通过引入语言结构来增强Transformer，能有效提升语言模型的句法泛化性能。以往的相关工作主要关注语言的句法树结构，特别是短语结构树。我们提出了基于编码器-解码器框架的Graph-Infused Layers Transformer

作者:Tianyu Huang, Yida Zhao, Chuyan Zhou · 语言:en

简介