察元AI教程库 · 文章 · 多模态
多模态大语言模型(MLLMs)通过融合视觉表示与大语言模型(LLMs),利用视觉适配器在多种视觉语言任务中达到了SOTA性能。本文首先证明,使用基于查询的Transformer(如Q-former)的适配器是一种简化的多模态
作者:Wenliang Zhong, Wenyi Wu, Qi Li · 语言:en
多模态大语言模型(MLLMs)通过融合视觉表示与大语言模型(LLMs),利用视觉适配器在多种视觉语言任务中达到了SOTA性能。本文首先证明,使用基于查询的Transformer(如Q-former)的适配器是一种简化的多模态