察元AI教程库 · 文章 · 大模型

Transformer的调度采样

定时采样是一种避免序列到序列生成中已知问题(暴露偏差)的技术。该技术在训练过程中,将教师强制的嵌入和模型前一步的预测混合输入模型。该技术已被用于改进……

作者:Tsvetomila Mihaylova, André F. T. Martins · 语言:en

前往原址学习

简介

定时采样是一种避免序列到序列生成中已知问题(暴露偏差)的技术。该技术在训练过程中,将教师强制的嵌入和模型前一步的预测混合输入模型。该技术已被用于改进……

返回教程库 · 察元AI产品家族