察元AI教程库 · 文章 · 多模态

VARGPT:视觉自回归多模态大语言模型中的统一理解与生成

我们提出了VARGPT,一种新颖的多模态大语言模型(MLLM),它在一个统一的自回归框架内实现了视觉理解和生成。VARGPT采用下一个token预测范式进行视觉理解,采用下一个尺度预测范式进行视觉自回归生成。

作者:Xianwei Zhuang, Yuxin Xie, Yufan Deng · 语言:en

前往原址学习

简介

我们提出了VARGPT,一种新颖的多模态大语言模型(MLLM),它在一个统一的自回归框架内实现了视觉理解和生成。VARGPT采用下一个token预测范式进行视觉理解,采用下一个尺度预测范式进行视觉自回归生成。

返回教程库 · 察元AI产品家族