察元AI教程库 · 文章 · 大模型

针对Transformer模型的LVT和FRE实验

本文中,我们对用于文本摘要的Transformer模型进行了大规模词汇技巧和丰富特征编码的实验。我们未能超越同等的基于RNN的序列到序列模型,因此我们尝试了更多模型,以找出哪些因素能提升结果

作者:Ilshat Gibadullin, Aidar Valeev · 语言:en

前往原址学习

简介

本文中,我们对用于文本摘要的Transformer模型进行了大规模词汇技巧和丰富特征编码的实验。我们未能超越同等的基于RNN的序列到序列模型,因此我们尝试了更多模型,以找出哪些因素能提升结果

返回教程库 · 察元AI产品家族