察元AI教程库 · 文章 · 大模型

基于大型语言模型的文档选择

大型语言模型（LLM）预训练消耗不断增长的计算预算，但最近的研究表明，通过精心挑选文档，可以在FLOPs仅为一部分的情况下实现相当的模型质量。受提示表明，特定领域训练文档选择

作者:Xiang Kong, Tom Gunter, Ruoming Pang · 语言:en

前往原址学习

简介

大型语言模型（LLM）预训练消耗不断增长的计算预算，但最近的研究表明，通过精心挑选文档，可以在FLOPs仅为一部分的情况下实现相当的模型质量。受提示表明，特定领域训练文档选择

返回教程库 · 察元AI产品家族