察元AI教程库 · 文章 · 知识库
检索增强生成（RAG）最近已扩展到多模态设置，将多模态大语言模型（MLLMs）与大量外部知识（如多模态知识图谱（MMKGs））连接起来。尽管这些方法近期取得了成功，但在音频-视觉领域，多模态RAG仍存在“静态图”问题。
作者:Hyeongcheol Park, Jiyoung Seo, Jaewon Mun · 语言:en
检索增强生成（RAG）最近已扩展到多模态设置，将多模态大语言模型（MLLMs）与大量外部知识（如多模态知识图谱（MMKGs））连接起来。尽管这些方法近期取得了成功，但在音频-视觉领域，多模态RAG仍存在“静态图”问题。