察元AI教程库 · 文章 · 智能体

从自信收尾到沉默失败:LLM代理中虚假成功的特征化

LLM代理可能在环境状态与任务完成情况不符的情况下静默失败,即声称任务完成。我们研究了这一失败模式——虚假成功,并在两个代理基准上进行了分析:来自8个模型家族的9,876个tau2-bench轨迹和来自4个模型家族的1,879个AppWorld轨迹,这些轨迹具有文本无关的独立性

作者:Laksh Advani · 语言:en

前往原址学习

简介

LLM代理可能在环境状态与任务完成情况不符的情况下静默失败,即声称任务完成。我们研究了这一失败模式——虚假成功,并在两个代理基准上进行了分析:来自8个模型家族的9,876个tau2-bench轨迹和来自4个模型家族的1,879个AppWorld轨迹,这些轨迹具有文本无关的独立性

返回教程库 · 察元AI产品家族