察元AI教程库 · 文章 · 大模型
Transformer在语言和视觉等多个领域表现出主导性能。然而,它们的计算成本随序列长度呈二次增长,这使得它们在资源受限的应用中难以使用。为应对这一问题,我们的方法是将权重
作者:Yinghan Long, Sayeed Shafayet Chowdhury, Kaushik Roy · 语言:en
Transformer在语言和视觉等多个领域表现出主导性能。然而,它们的计算成本随序列长度呈二次增长,这使得它们在资源受限的应用中难以使用。为应对这一问题,我们的方法是将权重