察元AI教程库 · 文章 · 排行榜

学习可泛化的预测器的冗余描述长度

理解微调是否激发了潜在能力或教授了新能力，是语言模型评估与安全性的根本问题。我们建立了一个形式化的信息论框架，用于量化微调从训练数据中提取的预测结构程度。

作者:Elizabeth Donoway, Hailey Joren, Fabien Roger · 语言:en

前往原址学习

简介

理解微调是否激发了潜在能力或教授了新能力，是语言模型评估与安全性的根本问题。我们建立了一个形式化的信息论框架，用于量化微调从训练数据中提取的预测结构程度。

返回教程库 · 察元AI产品家族