HuggingFace Daily Papers·2026-10-02 08:00· 5 天前AI 评分43

GPT-2 拆分学习中的梯度如何加剧文本泄露：按 token 与按文档计量

What Gradients Add to Text Leakage in Split Language Models, Counted per Token and per Document

AI 导读

在 GPT-2 的拆分学习场景中，仅凭客户端层公开权重，攻击者从激活值可还原 94.20% 的 token，加入梯度后升至 97.38%，提高 3.17 个百分点。