察元AI教程库 · 文章 · 大模型

MuRating:一种高质量数据选择方法,用于多语言大语言模型预训练

数据质量是大型语言模型性能的关键驱动因素,但现有的基于模型的筛选方法几乎只关注英语。我们引入了MuRating,一个可扩展的框架,将高质量的英文数据质量信号转化为一个单一评估者用于17个目标语言。MuR

作者:Zhixun Chen, Ping Guo, Wenhan Han · 语言:en

前往原址学习

简介

数据质量是大型语言模型性能的关键驱动因素,但现有的基于模型的筛选方法几乎只关注英语。我们引入了MuRating,一个可扩展的框架,将高质量的英文数据质量信号转化为一个单一评估者用于17个目标语言。MuR

返回教程库 · 察元AI产品家族