察元AI教程库 · 文章 · 大模型
近年来,文本分类领域的文献倾向于短文本序列(如句子或段落)。在实际应用中,多页多段落的文档很常见,但这些文档无法被传统的Transformer模型高效编码。我们比较了不同Transformer
作者:Xiang Dai, Ilias Chalkidis, Sune Darkner · 语言:en
近年来,文本分类领域的文献倾向于短文本序列(如句子或段落)。在实际应用中,多页多段落的文档很常见,但这些文档无法被传统的Transformer模型高效编码。我们比较了不同Transformer