察元AI教程库 · 文章 · 微调
本文提出了一种新颖的参数高效微调（PEFT）框架，用于多模态、多任务的迁移学习，结合预训练语言模型。PEFT技术如LoRA、BitFit和IA3已证明在特定任务上，其性能可与全量微调的预训练模型相媲美。
作者:Avelina Asada Hadji-Kyriacou, Ognjen Arandjelovic · 语言:en
本文提出了一种新颖的参数高效微调（PEFT）框架，用于多模态、多任务的迁移学习，结合预训练语言模型。PEFT技术如LoRA、BitFit和IA3已证明在特定任务上，其性能可与全量微调的预训练模型相媲美。