察元AI教程库 · 文章 · 大模型
尽管近年来预训练语言模型在生成高质量文本方面取得了进展，但这些模型在生成长段落并保持长距离连贯性方面仍面临挑战。本文提出了一种名为DiscoDVT的篇章感知离散变分Transformer，用于解决这一问题。
作者:Haozhe Ji, Minlie Huang · 语言:en
尽管近年来预训练语言模型在生成高质量文本方面取得了进展，但这些模型在生成长段落并保持长距离连贯性方面仍面临挑战。本文提出了一种名为DiscoDVT的篇章感知离散变分Transformer，用于解决这一问题。