察元AI教程库 · 文章 · 大模型
具有扩展自主性的大型语言模型(LLM)代理解锁了新能力,但也引入了更大的LLM安全挑战。特别是,一个LLM代理可能会追求偏离人类价值观和伦理规范的目标,这种风险被称为价值错位。现有的评估方法
作者:Chen Chen, Kim Young Il, Yuan Yang · 语言:en
具有扩展自主性的大型语言模型(LLM)代理解锁了新能力,但也引入了更大的LLM安全挑战。特别是,一个LLM代理可能会追求偏离人类价值观和伦理规范的目标,这种风险被称为价值错位。现有的评估方法