察元AI教程库 · 文章 · 微调

视觉语言模型的少样本对抗低秩微调

像CLIP这样的视觉-语言模型(VLMs)通过大规模对比预训练,在跨模态任务中表现出卓越的性能。为了高效地将这些基于Transformer的大型模型适应于下游任务,采用了参数高效微调(PEFT)技术,如低秩适应(LoRA)

作者:Sajjad Ghiasvand, Haniyeh Ehsani Oskouie, Mahnoosh Alizadeh · 语言:en

前往原址学习

简介

像CLIP这样的视觉-语言模型(VLMs)通过大规模对比预训练,在跨模态任务中表现出卓越的性能。为了高效地将这些基于Transformer的大型模型适应于下游任务,采用了参数高效微调(PEFT)技术,如低秩适应(LoRA)

返回教程库 · 察元AI产品家族