察元AI教程库 · 文章 · 微调

用于小型语言模型算术微调的结构化合成推理数据

小型语言模型适合本地部署,但通常在多步算术推理方面表现不佳。我们研究了在消费者硬件限制下,结构化合成推理数据能否改善这一行为。从GSM8K开始,我们生成了一个包含21,250个示例的语料库

作者:Jake O'Grady, Effirul Ramlan · 语言:en

前往原址学习

简介

小型语言模型适合本地部署,但通常在多步算术推理方面表现不佳。我们研究了在消费者硬件限制下,结构化合成推理数据能否改善这一行为。从GSM8K开始,我们生成了一个包含21,250个示例的语料库

返回教程库 · 察元AI产品家族