察元AI教程库 · 文章 · 多模态

同样的证据,不同的回答:对多模态大语言模型中推理顺序敏感性的审计

多模态大语言模型(MLLMs)的标准基准对每个项目进行单一排序评分,但未能检验无序重排是否会改变答案,这正是新兴AI评估指南所要求的基线可靠性属性。我们引入Facet-Probe,一种五维度审计(op

作者:Akshay Paruchuri, Sanmi Koyejo, Ehsan Adeli · 语言:en

前往原址学习

简介

多模态大语言模型(MLLMs)的标准基准对每个项目进行单一排序评分,但未能检验无序重排是否会改变答案,这正是新兴AI评估指南所要求的基线可靠性属性。我们引入Facet-Probe,一种五维度审计(op

返回教程库 · 察元AI产品家族