察元AI教程库 · 文章 · 微调

微调有助于检测大型语言模型的预训练数据

在大型语言模型(LLMs)时代,检测预训练数据变得越来越重要,这与公平评估和伦理风险相关。当前方法通过设计评分函数(如困惑度和Min-k%)来区分成员和非成员,然而,数据的多样性和

作者:Hengxiang Zhang, Songxin Zhang, Bingyi Jing · 语言:en

前往原址学习

简介

在大型语言模型(LLMs)时代,检测预训练数据变得越来越重要,这与公平评估和伦理风险相关。当前方法通过设计评分函数(如困惑度和Min-k%)来区分成员和非成员,然而,数据的多样性和

返回教程库 · 察元AI产品家族