察元AI教程库 · 文章 · 排行榜

超越规模：多样性系数作为自然语言数据变异性的数据质量度量

当前预训练大型语言模型（LLMs）的趋势主要集中在模型和数据集规模的扩大上。尽管预训练数据的质量被认为是训练强大LLMs的重要因素，但这一概念仍模糊不清，尚未得到严谨的刻画。为此

作者:Brando Miranda, Alycia Lee, Sudharsan Sundar · 语言:en

前往原址学习

简介

当前预训练大型语言模型（LLMs）的趋势主要集中在模型和数据集规模的扩大上。尽管预训练数据的质量被认为是训练强大LLMs的重要因素，但这一概念仍模糊不清，尚未得到严谨的刻画。为此

返回教程库 · 察元AI产品家族