察元AI教程库 · 文章 · 微调

跨模态内部-外部度量：视觉语言模型微调结果的预测视角

大型视觉-语言基础模型的微调仍然是一个被忽视的领域，尤其是在学习收益和灾难性遗忘方面。受对比双编码器中模态间隙重要性的启发，我们引入了跨模态-内模态度量（IIMM）——

作者:Laura Niss, Kevin Vogt-Lowell, Theodoros Tsiligkaridis · 语言:en

简介