察元AI教程库 · 文章 · 微调

针对大型预训练语言模型的参数高效微调的神经架构搜索

参数高效微调(PET)方法通过计算一小部分模型参数的压缩更新,或附加并微调少量新模型参数到预训练网络中,将预训练语言模型(PLMs)适配到下游任务。手工设计的PET架构

作者:Neal Lawton, Anoop Kumar, Govind Thattai · 语言:en

前往原址学习

简介

参数高效微调(PET)方法通过计算一小部分模型参数的压缩更新,或附加并微调少量新模型参数到预训练网络中,将预训练语言模型(PLMs)适配到下游任务。手工设计的PET架构

返回教程库 · 察元AI产品家族