察元AI教程库 · 文章 · 多模态
本工作提出了TimeChat,一种专门用于长视频理解的时间敏感多模态大型语言模型。我们的模型包含两个关键的架构贡献:(1)一个时间戳感知的帧编码器,将视觉内容与每个帧的时间戳绑定;(2)一个滑动
作者:Shuhuai Ren, Linli Yao, Shicheng Li · 语言:en
本工作提出了TimeChat,一种专门用于长视频理解的时间敏感多模态大型语言模型。我们的模型包含两个关键的架构贡献:(1)一个时间戳感知的帧编码器,将视觉内容与每个帧的时间戳绑定;(2)一个滑动