察元AI教程库 · 文章 · 微调

长有助于短：监督微调中的上下文长度如何影响大型语言模型的行为

大型语言模型（LLMs）在自然语言处理（NLP）任务中取得了令人瞩目的表现。随着现实应用对更长上下文窗口的需求增加，持续进行预训练和监督微调（SFT）于长上下文数据已成为一种普遍做法。然而

作者:Yingming Zheng, Hanqi Li, Kai Yu · 语言:en

前往原址学习

简介

大型语言模型（LLMs）在自然语言处理（NLP）任务中取得了令人瞩目的表现。随着现实应用对更长上下文窗口的需求增加，持续进行预训练和监督微调（SFT）于长上下文数据已成为一种普遍做法。然而

返回教程库 · 察元AI产品家族