察元AI教程库 · 文章 · 大模型

SBAT:基于稀疏边界感知的Transformer进行视频字幕生成

本文我们关注如何有效将Transformer结构应用于视频字幕生成问题。传统的Transformer最初是为单模态语言生成任务(如机器翻译)设计的。然而,视频字幕生成是一个多模态学习问题,视频特征

作者:Tao Jin, Siyu Huang, Ming Chen · 语言:en

前往原址学习

简介

本文我们关注如何有效将Transformer结构应用于视频字幕生成问题。传统的Transformer最初是为单模态语言生成任务(如机器翻译)设计的。然而,视频字幕生成是一个多模态学习问题,视频特征

返回教程库 · 察元AI产品家族