察元AI教程库 · 文章 · 微调

JORA:用于检索增强微调的JAX张量并行LoRA库

在大型语言模型(LLMs)用于检索任务的扩展中,尤其是检索增强生成(RAG)中,面临显著的内存限制,尤其是在微调长提示序列时。当前的开源库支持全模型推理和微调,但

作者:Anique Tahir, Lu Cheng, Huan Liu · 语言:en

前往原址学习

简介

在大型语言模型(LLMs)用于检索任务的扩展中,尤其是检索增强生成(RAG)中,面临显著的内存限制,尤其是在微调长提示序列时。当前的开源库支持全模型推理和微调,但

返回教程库 · 察元AI产品家族