察元AI教程库 · 文章 · 多模态

MLLMCLIP:通过特征级蒸馏提升大语言模型的视觉-语言表示鲁棒性

像CLIP这样的预训练视觉-语言模型在零样本识别方面表现出色,但在组合性方面(特别是属性-对象和关系结构)表现不佳。近期研究通过使用大型语言模型生成的合成硬负样本来缓解这一问题。

作者:Jongsuk Kim, Qiyu Wu, Zhuoyuan Mao · 语言:en

前往原址学习

简介

像CLIP这样的预训练视觉-语言模型在零样本识别方面表现出色,但在组合性方面(特别是属性-对象和关系结构)表现不佳。近期研究通过使用大型语言模型生成的合成硬负样本来缓解这一问题。

返回教程库 · 察元AI产品家族