察元AI教程库 · 文章 · 微调

关于大语言模型强化微调中熵动力学的研究

熵作为衡量大型语言模型（LLMs）生成输出多样性的关键指标，提供了关于其探索能力的宝贵见解。近年来，越来越多的研究关注于监测和调整熵，以更好地平衡探索与利用

作者:Shumin Wang, Yuexiang Xie, Wenhao Zhang · 语言:en

前往原址学习

简介

熵作为衡量大型语言模型（LLMs）生成输出多样性的关键指标，提供了关于其探索能力的宝贵见解。近年来，越来越多的研究关注于监测和调整熵，以更好地平衡探索与利用

返回教程库 · 察元AI产品家族