察元AI教程库 · 文章 · 微调

通过强化学习进行语言模型的微调，用于指令遵循和数学推理

本研究探讨了在紧凑型语言模型（Qwen2.5-0.5B Base）上使用强化学习（RL）微调技术在两个具有挑战性的任务——指令遵循和数学推理中的有效性。我们比较了监督微调（SFT）、直接偏好优化（DPO）等方法

作者:Yifu Han, Geo Zhang · 语言:en

前往原址学习

简介

本研究探讨了在紧凑型语言模型（Qwen2.5-0.5B Base）上使用强化学习（RL）微调技术在两个具有挑战性的任务——指令遵循和数学推理中的有效性。我们比较了监督微调（SFT）、直接偏好优化（DPO）等方法

返回教程库 · 察元AI产品家族