该研究系统分析了大型语言模型交互中隐私保护与效用之间的权衡机制。作者指出,现有隐私保护方法多采用与上下文无关的静态规则,导致下游任务性能严重下降,而隐私清洗影响模型表现的具体机制此前缺乏深入探讨。研究揭示了三个关键机制:上下文依赖效用,即数据价值随用户意图在关键约束与冗余噪声之间转换;策略性适应,即删除或替换的选择取决于任务对事实完整性与结构连贯性的依赖程度;组合交互,即属性之间构成协同依赖或对抗冗余的语义网络。基于这些发现,作者提出意图驱动的本地保护框架,通过蒸馏轻量模型Veilmind-4B驱动动态的提取—清洗—恢复流程,在保持较低隐私泄露的同时显著提升响应效用,推动隐私与效用的权衡向帕累托前沿靠近。
| 隐私-效用权衡 | 在保护用户隐私与保持模型响应有用性之间寻求平衡的取舍关系。 |
| 上下文依赖效用 | 数据价值随用户意图变化,有时是关键约束,有时是可忽略的噪声。 |
| 策略性适应 | 根据任务对事实完整性或结构连贯性的依赖,选择移除或替换敏感信息。 |
| 组合交互 | 多个属性之间形成协同依赖或拮抗冗余的语义网络,影响隐私保护范围。 |
| Veilmind-4B | 一个轻量级蒸馏模型,用于驱动动态的提取-净化-恢复流水线。 |
📱 每天一份 AI 前沿日报
关注公众号,每天 09:00 推送 · 不错过任何重磅