察元AI教程库 · 文章 · 微调
监督微调（SFT）是对大型语言模型（LLMs）进行对齐的主要范式，但其存在优化不稳定性和泛化能力有限的问题。近期的研究将这一问题归因于病态梯度缩放，并提出了动态微调（DFT）来纠正这一问题。
作者:Yucheng Zhou, Junwei Sheng, Qianning Wang · 语言:en
监督微调（SFT）是对大型语言模型（LLMs）进行对齐的主要范式，但其存在优化不稳定性和泛化能力有限的问题。近期的研究将这一问题归因于病态梯度缩放，并提出了动态微调（DFT）来纠正这一问题。