察元AI教程库 · 文章 · 大模型

Transformer能否作为文本生成GANs中RNN的即插即用替代方案?

本文我们解决了在有限计算预算下进行微调文本生成的问题。为此,我们采用了一种表现良好的文本生成对抗网络(GAN)架构——多样性促进的GAN(DPGAN),并尝试用自注意力层替换LSTM层

作者:Kevin Blin, Andrei Kucharavy · 语言:en

前往原址学习

简介

本文我们解决了在有限计算预算下进行微调文本生成的问题。为此,我们采用了一种表现良好的文本生成对抗网络(GAN)架构——多样性促进的GAN(DPGAN),并尝试用自注意力层替换LSTM层

返回教程库 · 察元AI产品家族