察元AI教程库 · 文章 · 智能体
评估LLM代理轨迹本质上是任务特定的:一个用于代码调试的代理应以正确性和错误处理为评判标准,而不是流畅性或安全性。然而,主流范式——即“LLM作为裁判,采用固定评判标准”——对所有任务都应用相同的静态维度,导致系统
作者:Liang Ding · 语言:en
评估LLM代理轨迹本质上是任务特定的:一个用于代码调试的代理应以正确性和错误处理为评判标准,而不是流畅性或安全性。然而,主流范式——即“LLM作为裁判,采用固定评判标准”——对所有任务都应用相同的静态维度,导致系统