察元AI教程库 · 文章 · 大模型

一种基于Transformer的简单文本到视频模型

我们提出了一种基于Transformer的通用且简单的文本到视频模型。由于文本和视频都是序列数据,我们将文本和图像编码到同一隐藏空间,然后输入到Transformer中以捕捉时间一致性,再通过解码器生成相应的文本或视频。

作者:Gang Chen · 语言:en

前往原址学习

简介

我们提出了一种基于Transformer的通用且简单的文本到视频模型。由于文本和视频都是序列数据,我们将文本和图像编码到同一隐藏空间,然后输入到Transformer中以捕捉时间一致性,再通过解码器生成相应的文本或视频。

返回教程库 · 察元AI产品家族