察元AI教程库 · 文章 · 大模型
利用大型语言模型实现中文语音识别与命名实体识别的端到端解决方案
将语音令牌映射到与文本令牌相同的特征空间,已成为将语音模态集成到仅解码器大型语言模型(LLMs)中的范式。另一种方法是使用编码器-解码器架构,通过交叉注意力将语音特征纳入其中。
作者:Yuang Li, Jiawei Yu, Min Zhang · 语言:en
前往原址学习
简介
将语音令牌映射到与文本令牌相同的特征空间,已成为将语音模态集成到仅解码器大型语言模型(LLMs)中的范式。另一种方法是使用编码器-解码器架构,通过交叉注意力将语音特征纳入其中。
返回教程库 · 察元AI产品家族