察元AI教程库 · 文章 · 智能体
大型语言模型(LLMs)作为自主代理,越来越多地被赋予解决复杂、长周期问题的任务。通过偏好为基础的离线方法(如直接偏好优化,DPO)对这些代理进行对齐是一个有前景的方向,但面临关键的粒度不匹配问题。轨迹
作者:Heyang Gao, Zexu Sun, Erxue Min · 语言:en
大型语言模型(LLMs)作为自主代理,越来越多地被赋予解决复杂、长周期问题的任务。通过偏好为基础的离线方法(如直接偏好优化,DPO)对这些代理进行对齐是一个有前景的方向,但面临关键的粒度不匹配问题。轨迹