察元AI教程库 · 文章 · 大模型

提及记忆:通过实体提及注意力将文本知识融入Transformer

自然语言理解任务,如开放域问答,通常需要从多个来源检索和整合事实性信息。我们提出通过将大型文本语料的半参数化表示整合到Transformer模型中作为输入来解决这一问题

作者:Michiel de Jong, Yury Zemlyanskiy, Nicholas FitzGerald · 语言:en

前往原址学习

简介

自然语言理解任务,如开放域问答,通常需要从多个来源检索和整合事实性信息。我们提出通过将大型文本语料的半参数化表示整合到Transformer模型中作为输入来解决这一问题

返回教程库 · 察元AI产品家族