察元AI教程库 · 文章 · 大模型
本文利用先前预训练模型（PTMs）的优势，提出了一种新颖的中文预训练不平衡Transformer（CPT）。与以往的中文PTMs不同，CPT专门设计用于利用自然语言理解（NLU）和自然语言生成（NLG）之间的共享知识。
作者:Yunfan Shao, Zhichao Geng, Yitao Liu · 语言:en
本文利用先前预训练模型（PTMs）的优势，提出了一种新颖的中文预训练不平衡Transformer（CPT）。与以往的中文PTMs不同，CPT专门设计用于利用自然语言理解（NLU）和自然语言生成（NLG）之间的共享知识。