察元AI教程库 · 文章 · 大模型
我们提出了Evalita-LLM，一个新设计的基准，用于评估大型语言模型（LLMs）在意大利语任务上的表现。Evalita-LLM的创新特征如下：（1）所有任务均为原生意大利语，避免了从意大利语翻译带来的问题和潜在的文化偏差；（2）任务设计更贴近真实场景，能更准确反映语言能力。
作者:Bernardo Magnini, Roberto Zanoli, Michele Resta · 语言:en
我们提出了Evalita-LLM，一个新设计的基准，用于评估大型语言模型（LLMs）在意大利语任务上的表现。Evalita-LLM的创新特征如下：（1）所有任务均为原生意大利语，避免了从意大利语翻译带来的问题和潜在的文化偏差；（2）任务设计更贴近真实场景，能更准确反映语言能力。