察元AI教程库 · 文章 · 微调
本研究以约旦法律为案例，探讨了为阿拉伯语问答任务对Llama-3.1大语言模型进行微调的方法。研究采用了两种模型版本——Llama-3.1-8B-bnb-4bit和Llama-3.1- 8B-Instruct-bnb-4bit——通过参数高效微调（PEFT）结合LoRA技术进行微调。
作者:Mohammed Fasha, Bassam Hammo, Bilal Sowan · 语言:en
本研究以约旦法律为案例，探讨了为阿拉伯语问答任务对Llama-3.1大语言模型进行微调的方法。研究采用了两种模型版本——Llama-3.1-8B-bnb-4bit和Llama-3.1- 8B-Instruct-bnb-4bit——通过参数高效微调（PEFT）结合LoRA技术进行微调。