察元AI教程库 · 文章 · 大模型

用于序列生成的多尺度Transformer模型学习

多尺度特征层次在计算机视觉领域已得到验证,这进一步激励研究人员设计用于自然语言处理的多尺度Transformer,主要基于自注意力机制。例如,限制不同头之间的感受野

作者:Bei Li, Tong Zheng, Yi Jing · 语言:en

前往原址学习

简介

多尺度特征层次在计算机视觉领域已得到验证,这进一步激励研究人员设计用于自然语言处理的多尺度Transformer,主要基于自注意力机制。例如,限制不同头之间的感受野

返回教程库 · 察元AI产品家族