察元AI教程库 · 文章 · 部署

nncase：面向异构存储架构的高效大语言模型部署端到端编译器

大型语言模型（LLM）在大规模系统上的高效部署受到内存架构异质性的阻碍，传统编译器因工作流程碎片化和高适应成本而受限。我们提出了nncase，一个开源的端到端编译框架，旨在统一优化整个

作者:Hui Guo, Qihang Zheng, Chenghai Huo · 语言:en

简介