察元AI教程库 · 文章 · 大模型
尽管Transformer在许多序列建模任务(如机器翻译)中展现出巨大潜力,但其确定性特性阻碍了其在高熵任务(如对话响应生成)中的泛化能力。以往的研究提出通过引入一种机制来捕捉对话响应的多样性
作者:Zhaojiang Lin, Genta Indra Winata, Peng Xu · 语言:en
尽管Transformer在许多序列建模任务(如机器翻译)中展现出巨大潜力,但其确定性特性阻碍了其在高熵任务(如对话响应生成)中的泛化能力。以往的研究提出通过引入一种机制来捕捉对话响应的多样性