察元AI教程库 · 文章 · 部署

LoopLynx:一种可扩展的数据流架构,用于高效LLM推理

本文提出LoopLynx,一种可扩展的数据流架构,用于高效LLM推理,通过混合时空设计优化FPGA的使用。LoopLynx的设计采用了混合时空架构,其中计算密集型操作被实现为

作者:Jianing Zheng, Gang Chen · 语言:en

前往原址学习

简介

本文提出LoopLynx,一种可扩展的数据流架构,用于高效LLM推理,通过混合时空设计优化FPGA的使用。LoopLynx的设计采用了混合时空架构,其中计算密集型操作被实现为

返回教程库 · 察元AI产品家族