察元AI教程库 · 文章 · 知识库
多模态检索增强生成(MRAG)已成为一种关键范式,用于将外部知识融入大规模语言模型(MLLMs)。尽管查询预处理(如改写)在文本RAG中是标准做法,但现有MRAG流程主要将视觉输入视为静态且不可变的,隐含地假设
作者:Jiankun Zhang, Shenglai Zeng, Kai Guo · 语言:en
多模态检索增强生成(MRAG)已成为一种关键范式,用于将外部知识融入大规模语言模型(MLLMs)。尽管查询预处理(如改写)在文本RAG中是标准做法,但现有MRAG流程主要将视觉输入视为静态且不可变的,隐含地假设