察元AI教程库 · 文章 · 微调
我们描述了乌普萨拉自然语言处理团队在SemEval-2 021任务2中关于多语言和跨语言上下文词义消歧的提交。我们探讨了三种预训练的多语言语言模型——XLM-RoBERTa(XLMR)、多语言BERT(mBERT)和多语言蒸馏BERT(mDistilBERT)的有用性。我们
作者:Huiling You, Xingran Zhu, Sara Stymne · 语言:en
我们描述了乌普萨拉自然语言处理团队在SemEval-2 021任务2中关于多语言和跨语言上下文词义消歧的提交。我们探讨了三种预训练的多语言语言模型——XLM-RoBERTa(XLMR)、多语言BERT(mBERT)和多语言蒸馏BERT(mDistilBERT)的有用性。我们