察元AI教程库 · 文章 · 提示词

通过微调而不微调千亿规模大语言模型实现隐私保护文本数据的合成

合成数据为在保护数据隐私的前提下训练模型提供了有前景的路径。对大型语言模型(LLMs)进行差分隐私(DP)微调作为数据生成器是有效的,但在计算资源有限时却不可行。与此同时,基于提示的方法,如私有演化(private evolution)等

作者:Bowen Tan, Zheng Xu, Eric Xing · 语言:en

前往原址学习

简介

合成数据为在保护数据隐私的前提下训练模型提供了有前景的路径。对大型语言模型(LLMs)进行差分隐私(DP)微调作为数据生成器是有效的,但在计算资源有限时却不可行。与此同时,基于提示的方法,如私有演化(private evolution)等

返回教程库 · 察元AI产品家族