察元AI教程库 · 文章 · 多模态
多模态大型语言模型（MLLMs）可以通过结合图像中的视觉证据与从外部源检索到的事实来回答知识密集型的视觉问题。然而，MLLMs可能会忽略两种模态中的相关证据，对文本句子或视觉区域的注意力较弱。
作者:Zhenbin Wang, Lei Zhang, Lituan Wang · 语言:en
多模态大型语言模型（MLLMs）可以通过结合图像中的视觉证据与从外部源检索到的事实来回答知识密集型的视觉问题。然而，MLLMs可能会忽略两种模态中的相关证据，对文本句子或视觉区域的注意力较弱。