察元AI教程库 · 文章 · 微调

保留预训练特征有助于校准微调的语言模型

大型预训练语言模型(PLMs)通过微调在自然语言理解(NLU)任务中表现出优异性能。然而,微调后的模型仍存在过度自信的预测问题,尤其是在领域外设置中。本文针对微调模型的校准问题

作者:Guande He, Jianfei Chen, Jun Zhu · 语言:en

前往原址学习

简介

大型预训练语言模型(PLMs)通过微调在自然语言理解(NLU)任务中表现出优异性能。然而,微调后的模型仍存在过度自信的预测问题,尤其是在领域外设置中。本文针对微调模型的校准问题

返回教程库 · 察元AI产品家族