察元AI教程库 · 文章 · 大模型

干扰矩阵：量化Transformer编码器中的跨语言干扰

本文全面研究了仅编码器的Transformer模型在83种语言中的语言干扰现象。我们通过在所有可能的语言对上训练和评估小型的类似BERT的模型，构建了一个干扰矩阵，提供了大规模的跨语言干扰量化

作者:Belen Alastruey, João Maria Janeiro, Alexandre Allauzen · 语言:en

简介