察元AI教程库 · 文章 · 排行榜

Transformer语法:在大规模上通过句法归纳偏见增强Transformer语言模型

我们引入了变换语法(TGs),一种新型的Transformer语言模型,结合了(i)Transformer的表达能力、可扩展性和强性能,以及(ii)递归句法组成,通过特殊的注意力掩码和确定性变换实现

作者:Laurent Sartran, Samuel Barrett, Adhiguna Kuncoro · 语言:en

前往原址学习

简介

我们引入了变换语法(TGs),一种新型的Transformer语言模型,结合了(i)Transformer的表达能力、可扩展性和强性能,以及(ii)递归句法组成,通过特殊的注意力掩码和确定性变换实现

返回教程库 · 察元AI产品家族