察元AI教程库 · 文章 · 微调

通过组件级梯度范数裁剪提升预训练语言模型微调的稳定性

对大型预训练语言模型（PLMs）进行微调已取得了许多最先进的成果。尽管其性能优越，但这种微调可能不稳定，导致性能波动显著，对实际应用带来潜在风险。以往的研究将

作者:Chenghao Yang, Xuezhe Ma · 语言:en

前往原址学习

简介

对大型预训练语言模型（PLMs）进行微调已取得了许多最先进的成果。尽管其性能优越，但这种微调可能不稳定，导致性能波动显著，对实际应用带来潜在风险。以往的研究将

返回教程库 · 察元AI产品家族