察元AI教程库 · 文章 · 大模型

关于Transformer模块可迁移性的实证研究(参数高效微调)

近年来,参数高效的微调方法受到了广泛关注。这些方法拥有显著更少的可训练权重,从而带来可扩展性和计算效率。在本文中,我们寻找最优的子网络,并研究了这些方法的能力

作者:Mohammad Akbar-Tajari, Sara Rajaee, Mohammad Taher Pilehvar · 语言:en

前往原址学习

简介

近年来,参数高效的微调方法受到了广泛关注。这些方法拥有显著更少的可训练权重,从而带来可扩展性和计算效率。在本文中,我们寻找最优的子网络,并研究了这些方法的能力

返回教程库 · 察元AI产品家族