察元AI教程库 · 文章 · 大模型

从Transformer语言模型中提取句子瓶颈自编码器

通过在大规模语料上预训练语言模型来实现文本表示学习,已成为构建NLP系统的一个标准起点。这种方法与基于原始文本训练的自编码器不同,其目标是学习将每个输入编码为一个向量,使得

作者:Ivan Montero, Nikolaos Pappas, Noah A. Smith · 语言:en

前往原址学习

简介

通过在大规模语料上预训练语言模型来实现文本表示学习,已成为构建NLP系统的一个标准起点。这种方法与基于原始文本训练的自编码器不同,其目标是学习将每个输入编码为一个向量,使得

返回教程库 · 察元AI产品家族