察元AI教程库 · 文章 · 微调

HBO：用于大语言模型微调的层次平衡优化

在混合多样化数据集上微调大型语言模型（LLMs）面临数据不平衡和异质性问题。现有方法通常在数据集之间（全局）解决这些问题，但忽略了单个数据集内部的不平衡和异质性（局部），这限制了

作者:Weixuan Wang, Minghao Wu, Barry Haddow · 语言:en

前往原址学习

简介

在混合多样化数据集上微调大型语言模型（LLMs）面临数据不平衡和异质性问题。现有方法通常在数据集之间（全局）解决这些问题，但忽略了单个数据集内部的不平衡和异质性（局部），这限制了

返回教程库 · 察元AI产品家族