察元AI教程库 · 文章 · 大模型

层次化Transformer是更高效的语言模型

Transformer模型在许多自然语言处理和序列建模任务中表现优异。值得注意的是,Transformer能够处理长序列,从而生成长而连贯的输出:GPT-3生成的完整段落或DALL-E生成的结构良好的图像。这些大型语言模型

作者:Piotr Nawrot, Szymon Tworkowski, Michał Tyrolski · 语言:en

前往原址学习

简介

Transformer模型在许多自然语言处理和序列建模任务中表现优异。值得注意的是,Transformer能够处理长序列,从而生成长而连贯的输出:GPT-3生成的完整段落或DALL-E生成的结构良好的图像。这些大型语言模型

返回教程库 · 察元AI产品家族