察元AI教程库 · 文章 · 大模型
大型Transformer模型在自然语言处理领域的近期进展中起到了核心作用。然而,这些模型的训练和推理成本迅速增长,变得极为昂贵。本文旨在通过寻找更高效的变体来降低Transformer的开销。C
作者:David R. So, Wojciech Mańke, Hanxiao Liu · 语言:en
大型Transformer模型在自然语言处理领域的近期进展中起到了核心作用。然而,这些模型的训练和推理成本迅速增长,变得极为昂贵。本文旨在通过寻找更高效的变体来降低Transformer的开销。C