察元AI教程库 · 文章 · 大模型

预训练的纯文本Transformer中的多模态神经元

语言模型展现出将一种模态中学习到的表示泛化到其他模态下游任务的惊人能力。我们能否将这种能力追溯到单个神经元？我们研究了在冻结的文本Transformer上通过自监督视觉增强的案例，其通过视觉自监督视觉增强

作者:Sarah Schwettmann, Neil Chowdhury, Samuel Klein · 语言:en

简介