察元AI教程库 · 文章 · 排行榜

Vibe-Eval:一个用于衡量多模态语言模型进展的严格评估套件

我们介绍了Vibe-Eval:一个用于评估多模态聊天模型的新开放基准和框架。Vibe-Eval包含269个视觉理解提示,其中包含100个难度较高的提示,每个提示都配有由专家撰写的标准答案。Vibe-Eval是开放性和具有挑战性的,具有双重目标

作者:Piotr Padlewski, Max Bain, Matthew Henderson · 语言:en

前往原址学习

简介

我们介绍了Vibe-Eval:一个用于评估多模态聊天模型的新开放基准和框架。Vibe-Eval包含269个视觉理解提示,其中包含100个难度较高的提示,每个提示都配有由专家撰写的标准答案。Vibe-Eval是开放性和具有挑战性的,具有双重目标

返回教程库 · 察元AI产品家族