察元AI教程库 · 文章 · 大模型

通过树正则化将语法引入Transformer语言模型

尽管人类语言理解的组合性解释基于层次树状过程，但像变换器这样的神经模型缺乏对这种树状结构的直接归纳偏置。引入句法归纳偏置可能在变换器中解锁更稳健和数据高效的训练

作者:Ananjan Nandi, Christopher D. Manning, Shikhar Murty · 语言:en

简介