察元AI教程库 · 文章 · 大模型

具有潜在深度的深度Transformer

变换器模型在许多序列建模任务中达到了最先进的性能。然而，如何利用大容量或可变深度的模型容量仍然是一个开放的挑战。我们提出了一种概率框架，通过学习后验来自动学习应使用哪些层

作者:Xian Li, Asa Cooper Stickland, Yuqing Tang · 语言:en

简介