察元AI教程库 · 文章 · 大模型

FL-Tuning：Transformer中前馈网络的层级微调

提示微调是一种新兴的、将预训练语言模型适应下游任务的方法。然而，现有研究大多只是将提示添加到输入序列中。这种方式由于中间存在多头自注意力和前馈网络的计算，无法达到预期效果

作者:Jingping Liu, Yuqiu Song, Kui Xue · 语言:en

简介