察元AI教程库 · 文章 · 排行榜

当意义不变但模型漂移时:在大语言模型中评估服务质量的令牌级行为不稳定问题

我们研究了大型语言模型如何对仅在词元层面实现不同但语义意图相同的提示做出反应,这一现象我们称之为提示变异。我们提出了基于提示的语义偏移(PBSS),一种用于测量LLM在不同提示下行为漂移的诊断框架

作者:Xiao Li, Joel Kreuzwieser, Alan Peters · 语言:en

前往原址学习

简介

我们研究了大型语言模型如何对仅在词元层面实现不同但语义意图相同的提示做出反应,这一现象我们称之为提示变异。我们提出了基于提示的语义偏移(PBSS),一种用于测量LLM在不同提示下行为漂移的诊断框架

返回教程库 · 察元AI产品家族