察元AI教程库 · 文章 · 大模型

Transformer模型的训练技巧

本文描述了使用最近的Tensor2Tensor框架和Transformer序列到序列模型（Vaswani等，2017）进行神经机器翻译的实验。我们考察了一些影响最终翻译质量、内存使用和训练稳定性的关键参数

作者:Martin Popel, Ondřej Bojar · 语言:en

前往原址学习

简介

本文描述了使用最近的Tensor2Tensor框架和Transformer序列到序列模型（Vaswani等，2017）进行神经机器翻译的实验。我们考察了一些影响最终翻译质量、内存使用和训练稳定性的关键参数

返回教程库 · 察元AI产品家族