察元AI教程库 · 文章 · 智能体
我们强调测试监控系统,以检测自主LLM代理中的隐蔽不当行为(例如,秘密分享私密信息)。为此,我们系统化了一种监控红队(MRT)工作流程,该流程包含:(1)不同层次的代理和监控情境意识;(2)不同的
作者:Neil Kale, Chen Bo Calvin Zhang, Kevin Zhu · 语言:en
我们强调测试监控系统,以检测自主LLM代理中的隐蔽不当行为(例如,秘密分享私密信息)。为此,我们系统化了一种监控红队(MRT)工作流程,该流程包含:(1)不同层次的代理和监控情境意识;(2)不同的