察元AI教程库 · 文章 · 智能体
长周期LLM代理需要能够对稀疏且延迟的奖励进行中间决策信用分配的强化学习方法。最近的基于群体的方法，如GiGPO，通过在重复锚点状态构建步骤级优势，优于GRPO。然而，我们证明了这种基于群体的方法存在局限性。
作者:Yuanfan Li, Qi Zhou, Wenjing Duan · 语言:en
长周期LLM代理需要能够对稀疏且延迟的奖励进行中间决策信用分配的强化学习方法。最近的基于群体的方法，如GiGPO，通过在重复锚点状态构建步骤级优势，优于GRPO。然而，我们证明了这种基于群体的方法存在局限性。