察元AI教程库 · 文章 · 微调

跨语言微调的一致性正则化

对预训练的跨语言语言模型进行微调,可以将特定任务的监督从一种语言转移到其他语言。本文提出,通过一致性正则化来改进跨语言微调。具体而言,我们使用示例一致性正则化来惩罚预测

作者:Bo Zheng, Li Dong, Shaohan Huang · 语言:en

前往原址学习

简介

对预训练的跨语言语言模型进行微调,可以将特定任务的监督从一种语言转移到其他语言。本文提出,通过一致性正则化来改进跨语言微调。具体而言,我们使用示例一致性正则化来惩罚预测

返回教程库 · 察元AI产品家族