察元AI教程库 · 文章 · 大模型
上下文门控能有效控制递归神经网络(RNN)基于神经机器翻译(NMT)中源和目标上下文的贡献。然而,将这些门控机制扩展到更复杂的Transformer架构具有挑战性,因为Transformer比RNN更为复杂。本文
作者:Xintong Li, Lemao Liu, Rui Wang · 语言:en
上下文门控能有效控制递归神经网络(RNN)基于神经机器翻译(NMT)中源和目标上下文的贡献。然而,将这些门控机制扩展到更复杂的Transformer架构具有挑战性,因为Transformer比RNN更为复杂。本文