察元AI教程库 · 文章 · 排行榜

HORNet:基于任务引导的视频问答中帧选择方法(适用于视觉-语言模型)

基于视觉-语言模型(VLMs)的视频问答(VQA)高度依赖于从输入视频中选择哪些帧,但大多数系统依赖于均匀或启发式采样,无法针对下游问答质量进行优化。我们引入了\textbf{HORNet},一种轻量级的帧

作者:Xiangyu Bai, Bishoy Galoaa, Sarah Ostadabbas · 语言:en

前往原址学习

简介

基于视觉-语言模型(VLMs)的视频问答(VQA)高度依赖于从输入视频中选择哪些帧,但大多数系统依赖于均匀或启发式采样,无法针对下游问答质量进行优化。我们引入了\textbf{HORNet},一种轻量级的帧

返回教程库 · 察元AI产品家族