察元AI教程库 · 文章 · 智能体
基于大型语言模型（LLM）的代理越来越多地应用于高风险场景，但当前基准主要评估任务是否完成，而非如何完成。我们引入了“过程感知评估”（PAE），一个将代理过程形式化为结构化观察并暴露其执行过程的框架。
作者:Hongliu Cao, Ilias Driouich, Eoin Thomas · 语言:en
基于大型语言模型（LLM）的代理越来越多地应用于高风险场景，但当前基准主要评估任务是否完成，而非如何完成。我们引入了“过程感知评估”（PAE），一个将代理过程形式化为结构化观察并暴露其执行过程的框架。