察元AI教程库 · 文章 · 多模态

突出重点:通过对象对齐的视觉对比解码缓解多模态大语言模型中的对象幻觉

我们研究了多模态大语言模型(MLLMs)中的对象幻觉问题,并通过构建对象对齐的辅助视图来改进视觉对比解码(VCD)。我们利用自监督视觉变换器中的对象中心注意力。特别是,我们移除了最显著的视觉证据

作者:Boqi Chen, Xudong Liu, Jianing Qiu · 语言:en

前往原址学习

简介

我们研究了多模态大语言模型(MLLMs)中的对象幻觉问题,并通过构建对象对齐的辅助视图来改进视觉对比解码(VCD)。我们利用自监督视觉变换器中的对象中心注意力。特别是,我们移除了最显著的视觉证据

返回教程库 · 察元AI产品家族