察元AI教程库 · 文章 · 大模型

多源Transformer解码器的输入组合策略

在多源序列到序列任务中，注意力机制可以以多种方式建模。这一主题在循环架构中已有充分研究。本文将先前工作扩展到Transformer架构中的编码器-解码器注意力机制。我们提出了四种不同的

作者:Jindřich Libovický, Jindřich Helcl, David Mareček · 语言:en

简介