察元AI教程库 · 文章 · 多模态

ControlMLLM：面向多模态大语言模型的无训练视觉提示学习

在本研究中，我们提出了一种无需训练的方法，通过测试时优化可学习的潜在变量，将视觉提示注入多模态大语言模型（MLLMs）。我们观察到，注意力作为MLLMs的核心模块，连接了文本提示令牌和视觉令牌，最终检测

作者:Mingrui Wu, Xinyue Cai, Jiayi Ji · 语言:en

简介