察元AI教程库 · 文章 · 大模型

大型语言模型中子词组合性的理解

大型语言模型（LLMs）以子词序列作为输入，需要将这些子词表示有效地组合成有意义的词级表示。本文提出了一系列全面的实验，探究LLMs如何组合子词信息，重点关注三个关键

作者:Qiwei Peng, Yekun Chai, Anders Søgaard · 语言:en

前往原址学习

简介

大型语言模型（LLMs）以子词序列作为输入，需要将这些子词表示有效地组合成有意义的词级表示。本文提出了一系列全面的实验，探究LLMs如何组合子词信息，重点关注三个关键

返回教程库 · 察元AI产品家族