察元AI教程库 · 文章 · 多模态

Prompt-Aware Adapter:面向多模态大语言模型的提示感知适配器,用于学习自适应视觉标记

为了弥合视觉与语言模态之间的差距,多模态大语言模型(MLLMs)通常学习一个适配器,将视觉输入转换为大语言模型(LLMs)可理解的标记。然而,大多数适配器生成一致的视觉标记,而与具体对象无关

作者:Yue Zhang, Hehe Fan, Yi Yang · 语言:en

前往原址学习

简介

为了弥合视觉与语言模态之间的差距,多模态大语言模型(MLLMs)通常学习一个适配器,将视觉输入转换为大语言模型(LLMs)可理解的标记。然而,大多数适配器生成一致的视觉标记,而与具体对象无关

返回教程库 · 察元AI产品家族