察元AI教程库 · 文章 · 智能体
LLM代理基准正日益成为交互式评估基础设施。代理可以观察状态、调用工具、修改工作区、提交成果并从结果流程中获得奖励。这种互动性使评估容易受到奖励黑客攻击:代理通过改进其被测量的得分来优化表现。
作者:Shenghan Zheng, Zonglin Di, Yimin Liu · 语言:en
LLM代理基准正日益成为交互式评估基础设施。代理可以观察状态、调用工具、修改工作区、提交成果并从结果流程中获得奖励。这种互动性使评估容易受到奖励黑客攻击:代理通过改进其被测量的得分来优化表现。