察元AI教程库 · 文章 · MCP
工具集成的代理被部署的前提是，外部工具能使其输出扎根于现实。然而，这种对工具的依赖也创造了关键的攻击面。当前的评估仅在良性环境中测试能力，问“代理能否正确使用工具”，却从未问“如果工具说谎会怎样”。
作者:Zhonghao Zhan, Huichi Zhou, Zhenhao Li · 语言:en
工具集成的代理被部署的前提是，外部工具能使其输出扎根于现实。然而，这种对工具的依赖也创造了关键的攻击面。当前的评估仅在良性环境中测试能力，问“代理能否正确使用工具”，却从未问“如果工具说谎会怎样”。