察元AI教程库 · 文章 · 部署
LoopLynx:一种可扩展的数据流架构,用于高效LLM推理
本文提出LoopLynx,一种可扩展的数据流架构,用于高效LLM推理,通过混合时空设计优化FPGA的使用。LoopLynx的设计采用了混合时空架构,其中计算密集型操作被实现为
作者:Jianing Zheng, Gang Chen · 语言:en
前往原址学习
简介
本文提出LoopLynx,一种可扩展的数据流架构,用于高效LLM推理,通过混合时空设计优化FPGA的使用。LoopLynx的设计采用了混合时空架构,其中计算密集型操作被实现为
返回教程库 · 察元AI产品家族