察元AI教程库 · 文章 · 智能体

HWE-Bench:在真实硬件Bug修复任务上对LLM代理进行基准测试

现有硬件设计基准主要评估大语言模型(LLMs)在孤立的组件级任务上的表现,例如从规格生成HDL模块,但对仓库级评估仍缺乏。我们引入HWE-Bench,首个大规模、仓库级的基准测试

作者:Fan Cui, Hongyuan Hou, Zizhang Luo · 语言:en

前往原址学习

简介

现有硬件设计基准主要评估大语言模型(LLMs)在孤立的组件级任务上的表现,例如从规格生成HDL模块,但对仓库级评估仍缺乏。我们引入HWE-Bench,首个大规模、仓库级的基准测试

返回教程库 · 察元AI产品家族