察元AI教程库 · 文章 · 知识库
多模态检索增强生成(MM-RAG)有望实现基于生物医学的问答,但目前尚不清楚在何种情况下应(i)将图表/表格转换为文本,还是(ii)使用无需光学字符识别(OCR)的视觉检索,直接返回页面图像并由生成器进行解释。我们研究
作者:Primož Kocbek, Azra Frkatović-Hodžić, Dora Lalić · 语言:en
多模态检索增强生成(MM-RAG)有望实现基于生物医学的问答,但目前尚不清楚在何种情况下应(i)将图表/表格转换为文本,还是(ii)使用无需光学字符识别(OCR)的视觉检索,直接返回页面图像并由生成器进行解释。我们研究