察元AI教程库 · 文章 · 大模型

基于Transformer的机器翻译中的固定编码自注意力模式

基于Transformer的模型对神经机器翻译带来了根本性的变革。Transformer架构的一个关键特征是所谓的多头注意力机制，该机制使模型能够同时关注输入的不同部分。然而，最近的研究表明，

作者:Alessandro Raganato, Yves Scherrer, Jörg Tiedemann · 语言:en

简介