察元AI教程库 · 文章 · 大模型
DIDS:面向大语言模型训练的领域影响感知数据采样
大语言模型(LLMs)通常在多领域数据集上进行训练,其中领域采样策略显著影响模型性能,因为下游任务中各领域的重要性不同。现有的优化领域级采样策略的方法在维持
作者:Weijie Shi, Jipeng Zhang, Yaguang Wu · 语言:en
前往原址学习
简介
大语言模型(LLMs)通常在多领域数据集上进行训练,其中领域采样策略显著影响模型性能,因为下游任务中各领域的重要性不同。现有的优化领域级采样策略的方法在维持
返回教程库 · 察元AI产品家族