察元AI教程库 · 文章 · 智能体
自主AI代理即使行为未改变，仍可能因行为漂移、对手适应以及决策模式变化而变得不安全，即使没有代码变更。我们提出了“信息有效性原则”：对代理的治理归结为对未观察到风险的上界估计$\hat{B}$。
作者:German Marin, Jatin Chaudhary · 语言:en
自主AI代理即使行为未改变，仍可能因行为漂移、对手适应以及决策模式变化而变得不安全，即使没有代码变更。我们提出了“信息有效性原则”：对代理的治理归结为对未观察到风险的上界估计$\hat{B}$。