察元AI教程库 · 文章 · 大模型

共享注意力权重以加速Transformer

最近，Transformer机器翻译系统通过在源语言和目标语言两侧堆叠注意力层，取得了显著成果。但该模型的推理过程由于在自回归解码中大量使用点积注意力而变得缓慢。本文我们加速了Transformer

作者:Tong Xiao, Yinqiao Li, Jingbo Zhu · 语言:en

前往原址学习

简介

最近，Transformer机器翻译系统通过在源语言和目标语言两侧堆叠注意力层，取得了显著成果。但该模型的推理过程由于在自回归解码中大量使用点积注意力而变得缓慢。本文我们加速了Transformer

返回教程库 · 察元AI产品家族