察元AI教程库 · 文章 · 大模型

用于机器翻译的Transformer上下文门控正则化

上下文门控能有效控制递归神经网络(RNN)基于神经机器翻译(NMT)中源和目标上下文的贡献。然而,将这些门控机制扩展到更复杂的Transformer架构具有挑战性,因为Transformer比RNN更为复杂。本文

作者:Xintong Li, Lemao Liu, Rui Wang · 语言:en

前往原址学习

简介

上下文门控能有效控制递归神经网络(RNN)基于神经机器翻译(NMT)中源和目标上下文的贡献。然而,将这些门控机制扩展到更复杂的Transformer架构具有挑战性,因为Transformer比RNN更为复杂。本文

返回教程库 · 察元AI产品家族