察元AI教程库 · 文章 · 插件

资源受限的智能体LLM后训练中的协同协同进化

使用工具的大型语言模型(LLM)代理会产生长而多轮的轨迹,使得基于梯度的后训练过程内存密集。进化策略(ES)能够在不进行反向传播的情况下实现全参数后训练,且无需梯度,可以最终达到基于梯度方法的

作者:Zhiyuan Wang, Shengcai Liu, Jiahao Wu · 语言:en

前往原址学习

简介

使用工具的大型语言模型(LLM)代理会产生长而多轮的轨迹,使得基于梯度的后训练过程内存密集。进化策略(ES)能够在不进行反向传播的情况下实现全参数后训练,且无需梯度,可以最终达到基于梯度方法的

返回教程库 · 察元AI产品家族