察元AI教程库 · 文章 · 多模态
多模态大语言模型(MLLMs)将视觉标记投影到语言模型的嵌入空间中,但其内部结构和视觉语义的处理机制仍不明确。在本研究中,我们引入了一个两阶段的分析框架,包含一个新颖的探针工具,$\textbf{Em}
作者:Yingqi Fan, Junlong Tong, Anhao Zhao · 语言:en
多模态大语言模型(MLLMs)将视觉标记投影到语言模型的嵌入空间中,但其内部结构和视觉语义的处理机制仍不明确。在本研究中,我们引入了一个两阶段的分析框架,包含一个新颖的探针工具,$\textbf{Em}