察元AI教程库 · 文章 · 大模型

Transformer语言适配器的隐空间探索

我们分析了Transformer语言适配器的操作方式,这些是小型模块,基于冻结的语言模型进行训练,以适应新目标语言的预测。我们表明,经过调整的预测主要在模型训练的源语言中演变,而目标语言

作者:Jesujoba O. Alabi, Marius Mosbach, Matan Eyal · 语言:en

前往原址学习

简介

我们分析了Transformer语言适配器的操作方式,这些是小型模块,基于冻结的语言模型进行训练,以适应新目标语言的预测。我们表明,经过调整的预测主要在模型训练的源语言中演变,而目标语言

返回教程库 · 察元AI产品家族