察元AI教程库 · 文章 · 排行榜

LUT-LLM：基于内存计算的FPGA上高效的大语言模型推理

大型语言模型（LLM）的快速发展极大地提升了日常应用。尽管许多基于FPGA的加速器，因其对细粒度数据控制的灵活性，相较于GPU在速度和能效方面表现更优，但最近针对GPU的优化已削弱了这一优势

作者:Zifan He, Shengyu Ye, Rui Ma · 语言:en

前往原址学习

简介

大型语言模型（LLM）的快速发展极大地提升了日常应用。尽管许多基于FPGA的加速器，因其对细粒度数据控制的灵活性，相较于GPU在速度和能效方面表现更优，但最近针对GPU的优化已削弱了这一优势

返回教程库 · 察元AI产品家族