察元AI教程库 · 文章 · 微调

通过自对齐困惑度选择大型语言模型微调的响应生成策略

微调大型语言模型(LLMs)通常依赖于生成大量输入-输出对。然而,对于一个给定的问题,可能存在许多有效的输出。在实践中,这些输出通常通过从教师模型中提炼知识获得,且会因具体教师模型的不同而有所变化

作者:Xuan Ren, Qi Chen, Lingqiao Liu · 语言:en

前往原址学习

简介

微调大型语言模型(LLMs)通常依赖于生成大量输入-输出对。然而,对于一个给定的问题,可能存在许多有效的输出。在实践中,这些输出通常通过从教师模型中提炼知识获得,且会因具体教师模型的不同而有所变化

返回教程库 · 察元AI产品家族