察元AI教程库 · 文章 · 微调

大型语言模型监督微调的数据混合优化

优化大型语言模型（LLMs）的监督微调（SFT）数据混合对于开发通用模型至关重要，但该领域仍处于探索阶段。本文将数据混合视为一个优化问题，并提出了一种新方法，旨在最小化验证集的

作者:Yuan Li, Zhengzhong Liu, Eric Xing · 语言:en

前往原址学习

简介

优化大型语言模型（LLMs）的监督微调（SFT）数据混合对于开发通用模型至关重要，但该领域仍处于探索阶段。本文将数据混合视为一个优化问题，并提出了一种新方法，旨在最小化验证集的

返回教程库 · 察元AI产品家族