察元AI教程库 · 文章 · 微调

Sim-CLIP：无监督的孪生对抗微调，用于构建稳健且语义丰富的视觉语言模型

视觉-语言模型（VLMs）严重依赖预训练的视觉编码器来支持下游任务，如图像描述、视觉问答和零样本分类。尽管这些编码器表现优异，但它们仍然极易受到不可察觉的对抗性扰动的攻击

作者:Md Zarif Hossain, Ahmed Imteaj · 语言:en

简介