察元AI教程库 · 文章 · 大模型
我们提出了SOLO,一个用于可扩展视觉-语言建模的单Transformer模型。当前的大型视觉-语言模型(LVLMs)如LLaVA大多采用异构架构,即连接预训练的视觉编码器与大型语言模型(LLMs),以促进视觉识别和复杂推理
作者:Yangyi Chen, Xingyao Wang, Hao Peng · 语言:en
我们提出了SOLO,一个用于可扩展视觉-语言建模的单Transformer模型。当前的大型视觉-语言模型(LVLMs)如LLaVA大多采用异构架构,即连接预训练的视觉编码器与大型语言模型(LLMs),以促进视觉识别和复杂推理