察元AI教程库 · 文章 · 大模型
本文提出了无文本的视觉-语言Transformer（TVLT），其中同质的Transformer块直接处理原始的视觉和音频输入，用于视觉-语言表示学习，且无需特定模态的设计，也不使用文本特定模块（如分词或自动编码）
作者:Zineng Tang, Jaemin Cho, Yixin Nie · 语言:en
本文提出了无文本的视觉-语言Transformer（TVLT），其中同质的Transformer块直接处理原始的视觉和音频输入，用于视觉-语言表示学习，且无需特定模态的设计，也不使用文本特定模块（如分词或自动编码）