察元AI教程库 · 文章 · 多模态
多模态大型语言模型(MLLMs)在表示和理解多种模态方面表现出卓越的能力。然而,它们通常仅关注模态间的成对对齐,而忽略了数据点之间的结构性关系。整合多模态信息可以增强模型的结构感知能力。
作者:Jiajin Liu, Dongzhe Fan, Jiacheng Shen · 语言:en
多模态大型语言模型(MLLMs)在表示和理解多种模态方面表现出卓越的能力。然而,它们通常仅关注模态间的成对对齐,而忽略了数据点之间的结构性关系。整合多模态信息可以增强模型的结构感知能力。