察元AI教程库 · 文章 · 大模型

SPECTER：基于引用信息的Transformer实现文档级表示学习

表示学习是自然语言处理系统中的关键组成部分。最近的Transformer语言模型如BERT学习了强大的文本表示，但这些模型针对的是词级和句子级的训练目标，没有利用到不同词之间相互关系的信息

作者:Arman Cohan, Sergey Feldman, Iz Beltagy · 语言:en

简介