察元AI教程库 · 文章 · 大模型

mLongT5：一种多语言且高效的文本到文本变换器，适用于长序列

我们提出了一个多语言、高效的文本到文本变换器模型，适用于处理长输入。该模型称为mLongT5，基于LongT5架构，同时利用了用于mT5预训练的多语言数据集以及UL2的预训练任务。我们

作者:David Uthus, Santiago Ontañón, Joshua Ainslie · 语言:en

简介