察元AI教程库 · 文章 · 微调
指令微调（IFT）显著增强了预训练大型语言模型（LLMs）的零样本能力。尽管已有研究证明编码数据在预训练阶段能提升LLM的推理能力，但其在IFT阶段激活内部推理能力的作用仍鲜有研究。本文探讨了这一问题。
作者:Xinlu Zhang, Zhiyu Zoey Chen, Xi Ye · 语言:en
指令微调（IFT）显著增强了预训练大型语言模型（LLMs）的零样本能力。尽管已有研究证明编码数据在预训练阶段能提升LLM的推理能力，但其在IFT阶段激活内部推理能力的作用仍鲜有研究。本文探讨了这一问题。