察元AI教程库 · 文章 · 知识库

使用对齐的视频字幕进行视频丰富化的检索增强生成

在本研究中,我们提出使用“对齐的视觉字幕”作为机制,将视频中的信息整合到基于检索增强生成(RAG)的聊天助手系统中。这些字幕能够描述大规模语料库中视频的视觉和音频内容,

作者:Kevin Dela Rosa · 语言:en

前往原址学习

简介

在本研究中,我们提出使用“对齐的视觉字幕”作为机制,将视频中的信息整合到基于检索增强生成(RAG)的聊天助手系统中。这些字幕能够描述大规模语料库中视频的视觉和音频内容,

返回教程库 · 察元AI产品家族