察元AI教程库 · 文章 · 大模型
最近的研究强调了Transformer架构在序列任务中的优势,同时,神经架构搜索(NAS)也开始超越人类设计的模型。我们的目标是将NAS应用于寻找比Transformer更好的替代方案。我们首先构建一个
作者:David R. So, Chen Liang, Quoc V. Le · 语言:en
最近的研究强调了Transformer架构在序列任务中的优势,同时,神经架构搜索(NAS)也开始超越人类设计的模型。我们的目标是将NAS应用于寻找比Transformer更好的替代方案。我们首先构建一个