察元AI教程库 · 文章 · 插件
使用工具的大型语言模型(LLM)代理会产生长而多轮的轨迹,使得基于梯度的后训练过程内存密集。进化策略(ES)能够在不进行反向传播的情况下实现全参数后训练,且无需梯度,可以最终达到基于梯度方法的
作者:Zhiyuan Wang, Shengcai Liu, Jiahao Wu · 语言:en
使用工具的大型语言模型(LLM)代理会产生长而多轮的轨迹,使得基于梯度的后训练过程内存密集。进化策略(ES)能够在不进行反向传播的情况下实现全参数后训练,且无需梯度,可以最终达到基于梯度方法的