察元AI教程库 · 文章 · 微调
像CLIP这样的视觉-语言模型(VLMs)通过大规模对比预训练,在跨模态任务中表现出卓越的性能。为了高效地将这些基于Transformer的大型模型适应于下游任务,采用了参数高效微调(PEFT)技术,如低秩适应(LoRA)
作者:Sajjad Ghiasvand, Haniyeh Ehsani Oskouie, Mahnoosh Alizadeh · 语言:en
像CLIP这样的视觉-语言模型(VLMs)通过大规模对比预训练,在跨模态任务中表现出卓越的性能。为了高效地将这些基于Transformer的大型模型适应于下游任务,采用了参数高效微调(PEFT)技术,如低秩适应(LoRA)