察元AI教程库 · 文章 · 大模型

Juru ：来自信誉良好来源的巴西法律大型语言模型

大语言模型的预训练所涉及的高计算成本限制了其研究。为解决这一问题，出现了两种策略：领域专业化和使用高质量数据进行预训练。为了探索这些策略，我们对Mistral-7B模型进行了19亿唯一token的领域专业化处理

作者:Roseval Malaquias Junior, Ramon Pires, Roseli Romero · 语言:en

简介