察元AI教程库 · 文章 · 多模态
多模态大语言模型（MLLMs）通过结合视觉输入与预训练语言模型的丰富先验知识，实现了优异的性能。然而，它们在以视觉为中心的任务中表现不佳，尤其是在视觉证据与预训练知识冲突时。我们单独探讨了这些失败的原因。
作者:Jiaang Li, Chengzu Li, Zhaochong An · 语言:en
多模态大语言模型（MLLMs）通过结合视觉输入与预训练语言模型的丰富先验知识，实现了优异的性能。然而，它们在以视觉为中心的任务中表现不佳，尤其是在视觉证据与预训练知识冲突时。我们单独探讨了这些失败的原因。