察元AI教程库 · 文章 · 大模型
我们开发了一种基于大型语言模型(LLM)的自动语音识别(ASR)系统,可以通过在文本提示中提供关键词作为先验信息来实现上下文化。我们采用了仅解码器架构,并使用我们自研的LLM PLaMo-100B,从零开始使用以文本为主的大型数据集进行预训练
作者:Kento Nozawa, Takashi Masuko, Toru Taniguchi · 语言:en
我们开发了一种基于大型语言模型(LLM)的自动语音识别(ASR)系统,可以通过在文本提示中提供关键词作为先验信息来实现上下文化。我们采用了仅解码器架构,并使用我们自研的LLM PLaMo-100B,从零开始使用以文本为主的大型数据集进行预训练