察元AI教程库 · 文章 · 大模型

多路径Transformer更优：神经机器翻译的一个案例研究

多年来，机器学习中的模型性能与模型规模之间遵循幂律关系。为了提高参数效率，近期研究倾向于增加模型深度而非宽度以实现更好的性能。本文研究了模型宽度如何影响

作者:Ye Lin, Shuhan Zhou, Yanyang Li · 语言:en

前往原址学习

简介

多年来，机器学习中的模型性能与模型规模之间遵循幂律关系。为了提高参数效率，近期研究倾向于增加模型深度而非宽度以实现更好的性能。本文研究了模型宽度如何影响

返回教程库 · 察元AI产品家族