察元AI教程库 · 文章 · 大模型

一个随机加权Transformer中隐藏着什么?

我们证明,在单层随机加权神经网络中,存在子网络可以实现卓越的性能,而无需修改权重初始化,就能在机器翻译任务中表现优异。为了在单层随机加权神经网络中寻找这些子网络,我们采用

作者:Sheng Shen, Zhewei Yao, Douwe Kiela · 语言:en

前往原址学习

简介

我们证明,在单层随机加权神经网络中,存在子网络可以实现卓越的性能,而无需修改权重初始化,就能在机器翻译任务中表现优异。为了在单层随机加权神经网络中寻找这些子网络,我们采用

返回教程库 · 察元AI产品家族