察元AI教程库 · 文章 · 大模型

更快的深度自适应Transformer

深度自适应神经网络可以根据输入词的难度动态调整深度,从而提高效率。主要挑战是如何衡量这种难度并决定所需的深度(即层数)。以往的工作通常构建一个停止单元来决定何时停止。

作者:Yijin Liu, Fandong Meng, Jie Zhou · 语言:en

前往原址学习

简介

深度自适应神经网络可以根据输入词的难度动态调整深度,从而提高效率。主要挑战是如何衡量这种难度并决定所需的深度(即层数)。以往的工作通常构建一个停止单元来决定何时停止。

返回教程库 · 察元AI产品家族