察元AI教程库 · 文章 · 部署

Maverick: 通过矩阵-向量乘法委托实现的私有且可验证的LLM推理

开源的大型语言模型(LLMs)正越来越具有竞争力,与闭源模型相比,它们提供了透明性,并且能够在不暴露用户输入给服务提供商的情况下进行推理。然而,本地运行大规模模型需要大量的计算资源

作者:Ben Merbaum, Mohammad Amin Raeisi, Wenhao Wang · 语言:en

前往原址学习

简介

开源的大型语言模型(LLMs)正越来越具有竞争力,与闭源模型相比,它们提供了透明性,并且能够在不暴露用户输入给服务提供商的情况下进行推理。然而,本地运行大规模模型需要大量的计算资源

返回教程库 · 察元AI产品家族