察元AI教程库 · 文章 · 大模型
我们探索了用于语音识别的语言建模中的深度自回归变换器模型。我们重点关注两个方面。首先，我们重新审视了专门用于语言建模的变换器模型配置。我们证明，经过良好配置的变换器模型在性能上优于我们基于标准模型的基线模型
作者:Kazuki Irie, Albert Zeyer, Ralf Schlüter · 语言:en
我们探索了用于语音识别的语言建模中的深度自回归变换器模型。我们重点关注两个方面。首先，我们重新审视了专门用于语言建模的变换器模型配置。我们证明，经过良好配置的变换器模型在性能上优于我们基于标准模型的基线模型