察元AI教程库 · 文章 · 大模型

TERA：基于Transformer编码器表示的语音自监督学习

我们介绍了一种自监督语音预训练方法，称为TERA，意为“通过改变获取的Transformer编码表示”。近年来的方法通常通过单一的辅助任务（如对比预测、自回归预测或掩码重建）来学习。与之前的方法不同，

作者:Andy T. Liu, Shang-Wen Li, Hung-yi Lee · 语言:en

简介