察元AI教程库 · 文章 · 微调

通过持续学习探索预训练跨语言模型的微调技术

最近,将预训练语言模型(如多语言BERT)微调用于下游的跨语言任务,取得了令人鼓舞的成果。然而,微调过程不可避免地会改变预训练模型的参数,削弱其跨语言能力,导致性能不佳

作者:Zihan Liu, Genta Indra Winata, Andrea Madotto · 语言:en

前往原址学习

简介

最近,将预训练语言模型(如多语言BERT)微调用于下游的跨语言任务,取得了令人鼓舞的成果。然而,微调过程不可避免地会改变预训练模型的参数,削弱其跨语言能力,导致性能不佳

返回教程库 · 察元AI产品家族