察元AI教程库 · 文章 · 多模态
为了弥合视觉与语言模态之间的差距,多模态大语言模型(MLLMs)通常学习一个适配器,将视觉输入转换为大语言模型(LLMs)可理解的标记。然而,大多数适配器生成一致的视觉标记,而与具体对象无关
作者:Yue Zhang, Hehe Fan, Yi Yang · 语言:en
为了弥合视觉与语言模态之间的差距,多模态大语言模型(MLLMs)通常学习一个适配器,将视觉输入转换为大语言模型(LLMs)可理解的标记。然而,大多数适配器生成一致的视觉标记,而与具体对象无关