察元AI教程库 · 文章 · 微调

高效且私密:在语言模型中实现参数高效微调下的记忆机制

对大型语言模型(LLMs)进行特定任务的微调会带来隐私风险,因为模型可能会无意中记住并泄露敏感的训练数据。尽管差分隐私(DP)提供了缓解这些风险的解决方案,但会引入显著的计算和性能权衡,

作者:Olivia Ma, Jonathan Passerat-Palmbach, Dmitrii Usynin · 语言:en

前往原址学习

简介

对大型语言模型(LLMs)进行特定任务的微调会带来隐私风险,因为模型可能会无意中记住并泄露敏感的训练数据。尽管差分隐私(DP)提供了缓解这些风险的解决方案,但会引入显著的计算和性能权衡,

返回教程库 · 察元AI产品家族