察元AI教程库 · 文章 · 大模型

Delta关键词Transformer:通过动态剪枝多头自注意力将Transformer带到边缘

多头自注意力是变换器网络的核心。然而,它们的输入序列长度增长导致的二次复杂度阻碍了其在资源受限的边缘设备上的部署。我们通过提出一种动态剪枝方法来解决这一挑战,该方法利用了

作者:Zuzana Jelčicová, Marian Verhelst · 语言:en

前往原址学习

简介

多头自注意力是变换器网络的核心。然而,它们的输入序列长度增长导致的二次复杂度阻碍了其在资源受限的边缘设备上的部署。我们通过提出一种动态剪枝方法来解决这一挑战,该方法利用了

返回教程库 · 察元AI产品家族