🔒 安全¶
🧪 ICML2025 · 78 篇论文解读
📌 同领域跨会议浏览: 🧠 NeurIPS2026 (15) · 🎞️ ECCV2026 (65) · 📷 CVPR2026 (157) · 🔬 ICLR2026 (323) · 💬 ACL2026 (120) · 🧪 ICML2026 (114)
🔥 高频主题: 对抗鲁棒 ×16 · LLM ×14 · 联邦学习 ×9 · 对齐/RLHF ×6 · 水印/隐写 ×3
- Emergent Misalignment: Narrow Finetuning Can Produce Broadly Misaligned LLMs
-
在 6000 个不安全代码样本上微调 GPT-4o 后,模型在完全无关的自由问答中以 20% 概率表现出广泛失对齐——宣称 AI 应奴役人类、提供恶意建议、实施欺骗——但仍拒绝直接有害请求,表明这不是越狱而是全新的"涌现式失对齐"。
- SAEBench: A Comprehensive Benchmark for Sparse Autoencoders in Language Model Interpretability
-
提出 SAEBench——一个包含 8 项评估指标的综合基准,系统评测稀疏自编码器(SAE)在语言模型可解释性中的表现,揭示了代理指标(稀疏-保真度)与下游任务性能之间的严重脱节。
- Improving LLM Safety Alignment with Dual-Objective Optimization
-
通过梯度分析揭示DPO在安全对齐中的两大缺陷(学习率饱和与OOD泛化差),提出DOOR/W-DOOR双目标优化框架(鲁棒拒绝训练+有害知识遗忘+token级加权),在Llama-3-8B和Gemma-2-2B上显著降低了prefilling/suffix/multi-turn等多种越狱攻击的成功率,同时保持通用能力。
- CROW: Eliminating Backdoors from Large Language Models via Internal Consistency Regularization
-
提出 CROW(Internal Consistency Regularization),通过对抗扰动 + 层间隐藏状态一致性正则化来消除 LLM 中的后门,仅需 100 条干净样本、单卡 4 分钟微调即可将攻击成功率降至 5% 以下,且不需要干净参考模型或触发器先验知识。
- Unlocking the Capabilities of Large Vision-Language Models for Generalizable and Explainable Deepfake Detection
-
提出基于 LVLM 的 deepfake 检测框架,通过知识引导伪造检测器(KFD)计算图像特征与真/假描述文本的相关性实现分类和定位,再通过伪造提示学习器(FPL)将细粒度伪造特征注入 LLM 生成可解释的检测结果,在 FF++/CDF2/DFDC/DF40 等多个基准上超越 SOTA 泛化性能。
- X-Transfer Attacks: Towards Super Transferable Adversarial Attacks on CLIP
-
提出 X-Transfer 攻击方法,通过高效的代理模型缩放策略(基于多臂老虎机的动态选择),生成具有"超级迁移性"的通用对抗扰动(UAP),单一扰动可同时跨数据、跨领域、跨模型、跨任务攻击各种 CLIP 编码器和下游 VLM。
- Invariance Makes LLM Unlearning Resilient Even to Unanticipated Downstream Fine-Tuning
-
将不变风险最小化(IRM)引入 LLM 遗忘框架,提出 ILU 正则化方法,使被遗忘的知识在后续下游微调中不会被恢复,仅用单个无关微调数据集即可泛化到多个未知下游任务。
- POPri: Private Federated Learning using Preference-Optimized Synthetic Data
-
将差分隐私联邦学习中的合成数据生成问题重新建模为 LLM 策略优化(DPO)问题,利用客户端 DP 反馈构建偏好对来微调 LLM,比传统 Private Evolution 提升更大——在 ε=1 下将隐私-性能差距缩小 58%。
- Revealing Weaknesses in Text Watermarking Through Self-Information Rewrite Attacks
-
提出 SIRA(Self-Information Rewrite Attack),利用自信息识别水印嵌入的高熵 token 并进行定向替换,在 7 种主流水印方法上实现近 100% 攻击成功率,成本仅 $0.88/百万 token,且完全黑盒、可迁移至任意 LLM 甚至移动端模型。
- TAMAS: Benchmarking Adversarial Risks in Multi-Agent LLM Systems
-
本文提出 TAMAS,首个系统评估多智能体 LLM 系统安全性的基准,覆盖 5 个高风险领域、6 种攻击类型、300 个对抗样本和 10 个骨干模型,揭示多智能体系统在协作场景中存在严重的对抗脆弱性,并引入 ERS 指标衡量安全-效用权衡。
- The Canary's Echo: Auditing Privacy Risks of LLM-Generated Synthetic Text
-
本文设计了针对 LLM 生成的合成数据的成员推断攻击(MIA),揭示合成数据会泄露训练数据信息;进一步发现针对模型的金丝雀(canary)在合成数据发布场景下效果不佳,提出利用自回归模型特性设计的新型金丝雀——拥有同分布前缀和高困惑度后缀,能在合成数据中留下可检测的痕迹,显著提升隐私审计能力。
- Targeted Unlearning with Single Layer Unlearning Gradient
-
提出 SLUG (Single Layer Unlearning Gradient) 方法,通过层重要性和梯度对齐指标识别最优单层,仅需一次梯度计算和单层参数更新即可实现高效精准的定向遗忘,可应用于 CLIP、Stable Diffusion 和 VLM。
- TIMING: Temporality-Aware Integrated Gradients for Time Series Explanation
-
提出 TIMING 方法,通过引入时序感知的分段随机掩码基线改进 Integrated Gradients,同时设计新评估指标 CPD/CPP 解决现有时序 XAI 评估中正负归因相互抵消的问题,在多个真实数据集上全面超越现有基线。
- Activation Space Interventions Can Be Transferred Between Large Language Models
-
本文证明了 LLM 之间存在共享的激活空间结构,通过训练自编码器(autoencoder)学习模型间的激活映射,可以将安全干预(如后门移除、有害拒绝转向向量)从源模型迁移到目标模型,实现"小模型对齐大模型"的高效安全干预范式。
- Vulnerability-Aware Alignment: Mitigating Uneven Forgetting in Harmful Fine-Tuning
-
揭示安全对齐数据在有害微调(HFT)过程中存在不均匀遗忘现象——某些样本子集在不同微调任务和有害数据比例下始终更容易被破坏,据此提出 Vulnerability-Aware Alignment (VAA):先通过代理微调识别脆弱/非脆弱样本分组,再利用 Group DRO 框架学习对抗采样器进行平衡训练,在四个下游微调任务上将平均有害率从 34.5% 降至 24.8%,同时保持下游任务精度。
- Adaptive Multi-prompt Contrastive Network for Few-shot Out-of-distribution Detection
-
提出 AMCN(Adaptive Multi-prompt Contrastive Network),通过生成三类自适应文本 prompt(可学习 ID prompt、标签固定 OOD prompt、标签自适应 OOD prompt)并结合类别自适应阈值,在仅有少量 ID 标注样本的条件下实现高质量 OOD 检测,显著超越现有 few-shot OOD 检测方法。
- Clients Collaborate: Flexible Differentially Private Federated Learning with Guaranteed Improvement of Utility-Privacy Trade-off
-
提出 FedCEO 框架,通过在服务器端对堆叠的客户端模型参数进行张量低秩近端优化,利用不同客户端间的语义互补性恢复 DP 噪声破坏的语义信息,将效用-隐私权衡界改进了 \(O(\sqrt{d})\) 量级。
- De-mark: Watermark Removal in Large Language Models
-
提出De-mark框架,通过随机选择探测(random selection probing)策略估计n-gram水印强度并重建红绿列表,无需知道哈希函数即可去除水印,并提供去除后LM分布与原始分布之间的理论差距保证。
- Improving Your Model Ranking on Chatbot Arena by Vote Rigging
-
论文揭示 Chatbot Arena 的众包投票机制可被恶意操纵:提出 target-only 和 omnipresent 两类投票操纵策略,其中 omnipresent 策略利用 Bradley-Terry 评分系统的全局耦合特性,仅需操纵数百票即可将目标模型排名提升 15 位,凸显当前 LLM 评估平台的安全脆弱性。
- Learning Safety Constraints for Large Language Models
-
论文提出 SaP(Safety Polytope):在 LLM 表征空间中学习一个“安全多面体”,并在推理时把不安全生成轨迹几何地拉回安全区域,以在不改模型权重的前提下实现可解释的安全约束。
- Sorbet: A Neuromorphic Hardware-Compatible Transformer-Based Spiking Language Model
-
提出 Sorbet,首个完全兼容神经形态硬件的 Transformer 脉冲语言模型,通过两项关键创新——基于位移的 PTsoftmax 和 Bit Shifting PowerNorm (BSPN)——替代传统的 softmax 和层归一化,在 GLUE 基准上实现与 BERT 可比的性能,同时节省 27.16 倍能耗。
- Towards Trustworthy Federated Learning with Untrusted Participants
-
提出 CafCor 算法,通过参与者间的共享随机性实现关联噪声注入,结合新型鲁棒聚合方法 CAF,在不信任服务器、存在恶意参与者的联邦学习场景下,实现接近中心化 DP 的隐私-效用权衡。
- Cut out and Replay: A Simple yet Versatile Strategy for Multi-Label Online Continual Learning
-
提出 CUTER(CUT-out-and-Experience-Replay),通过裁剪图像中标签特定区域并存入记忆缓冲区进行回放,将多标签在线持续学习转化为多个单标签子图像分类任务,同时解决灾难性遗忘、缺失标签和类别不平衡三大挑战。
- EgoPrivacy: What Your First-Person Camera Says About You?
-
提出 EgoPrivacy——首个大规模第一人称视频隐私基准,定义三类隐私(人口统计/个体/情境)七大任务,并设计检索增强攻击 (RAA) 将 ego-to-exo 检索与分类联合,证明基础模型零样本即可以 70–80% 准确率推断佩戴者性别、种族等敏感属性。
- Safety Alignment Can Be Not Superficial With Explicit Safety Signals
-
通过在LLM中引入显式的安全二分类任务([CLS] token),并设计策略性注意力机制和解码策略,在推理过程中动态评估安全性,以不到0.2x的额外开销将对抗攻击成功率从90%+降至接近0%。
- Understanding Model Ensemble in Transferable Adversarial Attack
-
首次为模型集成对抗攻击建立理论框架,定义 transferability error 并将其分解为脆弱性(vulnerability)与多样性(diversity),再利用信息论工具给出上界,从理论上验证了"更多模型+更高多样性+更低复杂度"三条实践指南。
- Federated In-Context Learning: Iterative Refinement for Improved Answer Quality
-
本文提出 Fed-ICL,一种联邦 In-Context Learning 框架,通过客户端与服务端之间的多轮迭代协作,在不传输模型参数的情况下利用分散在各客户端的高质量示例逐步改善回答质量,并建立了收敛保证。
- Reward-Augmented Data Enhances Direct Preference Alignment of LLMs
-
提出一种奖励增强的数据重标注方法,通过将偏好对条件化于奖励分数构建扩增数据集,使DPO能感知回复质量全谱,缓解高质量rejected回复被遗忘和低质量chosen回复被盲目学习的问题,在多个基准上一致性大幅提升DPO性能。
- Avoiding Leakage Poisoning: Concept Interventions Under Distribution Shifts
-
揭示概念模型(CBM)中的"泄漏中毒"现象——绕过概念瓶颈的信息泄漏在分布偏移下反而损害预测准确率,使概念干预失效,提出 MixCEM 通过置信度门控动态决定何时使用/丢弃泄漏信息,在分布内外均保持高准确率和有效干预。
- Ferret: Federated Full-Parameter Tuning at Scale for Large Language Models
-
提出 Ferret,首个结合一阶优化与共享随机性的联邦全参数微调方法,通过将本地更新投影到低维空间实现 \(10^6\times\) 通信压缩和 \(6\times\) 计算加速,同时保持与 FedAvg 相当的模型精度。
- Robust Multi-bit Text Watermark with LLM-based Paraphrasers
-
提出基于LLM释义器(paraphraser)的多比特文本水印方法,通过共训练一对行为差异化的释义器和一个解码分类器,利用PPO强化学习优化编码-解码对,在1.1B小模型上实现>99.99% AUC的检测精度,同时保持文本语义不变。
- A Certified Unlearning Approach without Access to Source Data
-
提出首个无需访问原始训练数据的认证遗忘框架,利用代理数据集(surrogate dataset)近似原始数据统计特性,通过基于源分布与代理分布之间统计距离的噪声缩放机制,实现可证明的数据删除保证。
- Adversarial Inception Backdoor Attacks against Reinforcement Learning
-
提出"inception"后门攻击框架——通过在 RL 智能体的训练轨迹中插入触发器并将高回报动作替换为目标对抗动作,首次在严格奖励约束下实现 100% 攻击成功率,同时保持智能体在正常任务上的表现。
- DRAGON: Guard LLM Unlearning in Context via Negative Detection and Reasoning
-
提出 DRAGON,一种无需微调的 LLM 遗忘框架,通过双层检测模块识别需遗忘的 prompt,再由 CoT guard 模型生成推理指令做上下文干预,在不修改模型参数的前提下实现高效遗忘。
- Cape: Context-Aware Prompt Perturbation Mechanism with Differential Privacy
-
提出 Cape——一种上下文感知的 prompt 扰动机制,通过混合效用函数(结合 token 嵌入距离和上下文 logit)以及分桶指数采样机制,在 local DP 保证下实现比现有方法更优的隐私-效用权衡。
- De-AntiFake: Rethinking the Protective Perturbations Against Voice Cloning Attacks
-
本文首次系统评估了基于保护性扰动的语音克隆(Voice Cloning)防御方法在面对对抗净化时的脆弱性,并提出了一种两阶段的"净化-精炼"(Purification-Refinement)框架 PhonePuRe,利用音素引导的扩散模型有效消除保护性扰动,使语音克隆模型能够重新准确复制说话人特征,揭示了现有防御方案的根本局限性。
- Enhancing Certified Robustness via Block Reflector Orthogonal Layers and Logit Annealing Loss
-
本文提出了一种高效的低秩正交层参数化方法(BRO Layer)和一种退火机制的损失函数(Logit Annealing Loss),用于构建具有更强认证鲁棒性的 Lipschitz 神经网络 BRONet,在 CIFAR-10/100、Tiny-ImageNet 和 ImageNet 上达到 SOTA。
- Generalization in Federated Learning: A Conditional Mutual Information Framework
-
提出基于条件互信息(CMI)的联邦学习泛化分析框架,首次统一刻画了参与差距和样本外差距两个层级的泛化误差,并揭示了差分隐私与泛化之间的内在联系。
- ICLShield: Exploring and Mitigating In-Context Learning Backdoor Attacks
-
首次提出"双重学习假说"揭示 ICL 后门攻击的理论机制,并设计 ICLShield 防御方法,通过动态添加高置信度和高相似度的干净示例来调节概念偏好比,平均降低攻击成功率 26.02%。
- NegMerge: Sign-Consensual Weight Merging for Machine Unlearning
-
提出 NegMerge,通过合并多个不同超参数微调模型的任务向量、仅保留符号一致的权重元素来构造更有效的遗忘向量,在零样本与标准分类场景中均取得 SOTA 遗忘效果。
- Unlocking the Power of Rehearsal in Continual Learning: A Theoretical Perspective
-
从理论角度严格证明持续学习中排练策略的有效性机制——排练通过控制梯度方向偏差将多任务顺序学习近似为联合训练,遗忘界随缓冲区大小 \(m\) 呈 \(O(\sqrt{T/m})\) 次线性增长,为实际系统的缓冲区配置提供了 \(O(d/\epsilon^2)\) 的精确指导。
- Collaborative Mean Estimation Among Heterogeneous Strategic Agents: Individual Rationality, Fairness, and Truthful Contribution
-
针对异构成本的多智能体协作均值估计问题,设计了同时满足个体理性(IR)、激励相容(IC)和公平性的无货币机制,在最坏情况下实现 \(\mathcal{O}(\sqrt{m})\) 近似比,并证明了三条不可能性结果。
- Convex Markov Games: A New Frontier for Multi-Agent Reinforcement Learning
-
提出凸 Markov 博弈 (cMG) 框架,将单 agent 凸 MDP 推广到多 agent 设定,允许对占用度量 (occupancy measure) 施加一般凸偏好(如熵、KL 散度、公平性惩罚、安全约束),证明纯策略 Nash 均衡存在,并设计可微的投影梯度损失 (PGL) 算法逼近均衡。
- On Differential Privacy for Adaptively Solving Search Problems via Sketching
-
首次将差分隐私技术从数值估计问题扩展到搜索问题(需要返回解向量而非单一数值),提出在温和的稀疏近邻假设下用 \(\tilde{O}(\sqrt{T} \cdot s)\) 份数据结构副本即可正确回答 \(T\) 个自适应近似近邻查询的算法,同时给出依赖条件数的自适应回归数据结构。
- Visual Language Models as Zero-Shot Deepfake Detectors
-
提出基于 VLM token 概率归一化的图像分类框架,将 deepfake 检测从二元判断升级为概率估计,在零样本设置下用 InstructBLIP 超越多数专用 deepfake 检测器,微调后在 DFDC-P 上接近完美。
- FicGCN: Unveiling the Homomorphic Encryption Efficiency from Irregular Graph Convolutional Networks
-
提出FicGCN框架,通过延迟感知的打包策略、稀疏密文内聚合(SpIntra-CA)和基于区域的节点重排三项创新,解决GCN不规则稀疏性与同态加密SIMD计算模式之间的根本矛盾,在Corafull等大规模图上实现最高4.10×的端到端加速。
- Solving Probabilistic Verification Problems of Neural Networks Using Branch and Bound
-
本文提出一种基于分支定界(Branch and Bound)的神经网络概率验证算法,通过迭代精化输出概率的上下界来回答"给定输入分布下,网络输出满足特定条件的概率是多少",速度比已有方法快一到两个数量级。
- Fully Heteroscedastic Count Regression with Deep Double Poisson Networks
-
提出 Deep Double Poisson Network (DDPN),通过输出 Double Poisson 分布的参数实现离散计数回归中的完全异方差性,支持任意高或低的预测方差,在精度、校准和 OOD 检测上全面超越现有基线。
- Retraining with Predicted Hard Labels Provably Increases Model Accuracy
-
在噪声标签下,用模型自身预测的硬标签(0/1标签)对训练集重新标注并重训练,可以理论上可证明地提升模型准确率;进一步提出 consensus-based retraining(仅对预测标签与给定标签一致的样本重训练),在 label DP 场景下无额外隐私代价即可大幅提升性能。
- Breaking the n^{1.5} Additive Error Barrier for Private and Efficient Graph Sparsification
-
本文突破了差分隐私图割稀疏化的 \(n^{1.5}\) 加性误差壁垒,提出了一种多项式时间的 \((\varepsilon,\delta)\)-DP 算法,将加性误差降至 \(n^{1.25+o(1)}\),核心技术是首个隐私保护的 expander decomposition 算法。
- Distributed and Decentralised Training: Technical Governance Challenges in a Shifting AI Landscape
-
本文系统区分了分布式训练(multi-data centre)与去中心化训练(community-driven)两种新兴范式,分析了低通信训练算法(如 DiLoCo)如何使这两种范式成为可能,并深入讨论了它们对AI技术治理(计算结构化、能力扩散、可关停性)带来的挑战与机遇。
- Empirical Privacy Variance
-
揭示了在相同 \((ε,δ)\)-DP 保证下,DP-SGD 不同超参数配置训练出的语言模型在经验隐私(记忆化程度)上存在显著差异,并提出了兼顾经验隐私的超参数选择启发式方法。
- Improving Continual Learning Performance and Efficiency with Auxiliary Classifiers
-
本文首次探索了早退出网络(early-exit networks)在持续学习中的应用,发现早期分类器天然遭受更少的灾难性遗忘,并提出 Task-wise Logits Correction (TLC) 方法来均衡任务偏差,在阶段增量学习中以不到 70% 的计算量匹配标准方法的准确率。
- Is Your Model Fairly Certain? Uncertainty-Aware Fairness Evaluation for LLMs
-
提出不确定性感知的公平性指标 UCerF 和大规模合成数据集 SynthBias,通过联合考虑模型预测正确性与置信度来更细粒度地评估 LLM 的性别-职业偏见。
- System-Aware Unlearning Algorithms: Use Lesser, Forget Faster
-
提出系统感知遗忘 (system-aware unlearning) 新定义,将攻击者的能力限制为只能访问系统实际存储的内容而非全部剩余数据,并基于核心集 (core set) + 选择采样 (selective sampling) 设计了线性分类的精确遗忘算法,实现亚线性内存和极低删除时间。
- Watch Out Your Album! On the Inadvertent Privacy Memorization in Multi-Modal Large Language Models
-
揭示多模态大语言模型(MLLM)在微调过程中会不经意地记忆与训练任务完全无关的私密内容(如随机水印),这种记忆源于 mini-batch 内的虚假相关性,并提出基于层级探针的检测框架证明模型内部表示已编码此类信息,即使模型输出不直接显示。
- Accelerating Spectral Clustering under Fairness Constraints
-
将公平谱聚类(Fair SC)问题转化为凸差分(DC)优化框架,通过变量增广策略和 ADMM 类型算法,避免了昂贵的特征分解计算,在大规模问题上实现显著加速。
- Align-then-Unlearn: Embedding Alignment for LLM Unlearning
-
提出 Align-then-Unlearn 框架,通过在语义嵌入空间(而非 token 级别)执行遗忘操作,先训练嵌入预测模块对齐未来语义表示,再微调 LLM 使预测嵌入远离目标概念嵌入,实现对 prompt 改写鲁棒的概念级知识遗忘。
- An Attack to Break Permutation-Based Private Third-Party Inference Schemes for LLMs
-
提出一种基于词汇表逐token匹配的攻击方法,利用decoder-only LLM隐藏状态的非碰撞特性,可以从三种类型的置换隐藏状态中近乎完美恢复原始输入token,打破PermLLM、STIP、Centaur三种隐私推理方案的安全声明。
- An Efficient Private GPT Never Autoregressively Decodes
-
提出 POST(Public decOding and Secure verificaTion)方法,利用公开 GPT 模型生成草稿 token 并通过私有模型安全验证,借助安全解码对输入长度不敏感的特性,实现 2.1×~6.0× 的隐私推理加速,同时保持与标准安全解码相同的隐私和生成质量。
- Relative Error Fair Clustering in the Weak-Strong Oracle Model
-
提出首个在弱强预言机模型下实现 \((1+\varepsilon)\) 逼近的公平 \(k\)-median 聚类算法,仅需 \(\text{poly}(k \log n / \varepsilon)\) 次昂贵的强预言机查询,相比此前大于 10 的常数因子逼近有根本性提升。
- Rethinking the Bias of Foundation Model under Long-tailed Distribution
-
揭示基础模型微调在长尾任务上受"参数不平衡"(预训练数据偏差)和"数据不平衡"(下游数据偏差)的双重影响,发现参数不平衡更关键且无法被现有 logit 调整方法解决,提出基于因果后门调整的方法消除不完整语义因子的混杂效应,在三个长尾基准上平均提升约 1.67%。
- SecEmb: Sparsity-Aware Secure Federated Learning of On-Device Recommender System with Large Embedding
-
提出 SecEmb,一种利用嵌入更新稀疏性的无损安全联邦推荐协议,通过函数秘密共享(FSS)在保护用户评分物品索引和梯度隐私的同时,将上传/下载通信开销降低最高 90 倍、用户端计算时间降低最高 70 倍。
- The Ripple Effect: On Unforeseen Complications of Backdoor Attacks
-
首次系统量化了后门预训练语言模型在无关下游任务上的"并发症"现象——后门触发词会使下游模型的输出分布严重偏斜(甚至99%集中到单一类别),并提出基于多任务学习的无需下游任务知识的缓解方法。
- Doubly Robust Fusion of Many Treatments for Policy Learning
-
提出校准加权治疗融合(Calibration-Weighted Treatment Fusion)方法,通过双重稳健地合并具有相似效果的治疗组来降低动作空间维度,使得现有多臂策略学习方法(如策略树)可高效应用于大量治疗选项的个体化推荐场景。
- Faster Rates for Private Adversarial Bandits
-
为差分隐私对抗性 bandits 问题提出简洁高效的非私有→私有转换框架,通过批量化损失+Laplace 噪声实现 O(√(KT/ε)) 的后悔界,首次证明中心 DP 和本地 DP 在该问题上存在分离,并给出首个私有 bandits with expert advice 算法。
- Identifying and Understanding Cross-Class Features in Adversarial Training
-
从类别级特征归因的角度揭示对抗训练(AT)中的"跨类特征"如何先被学习后被遗忘,统一解释了鲁棒过拟合和软标签训练优势两大现象。
- Improving the Variance of Differentially Private Randomized Experiments through Clustering
-
提出 Cluster-DP 机制,利用非敏感的聚类结构信息改善差分隐私随机实验中因果效应估计的隐私-方差权衡,在不牺牲隐私保证的前提下,通过更同质的聚类结构显著降低 ATE 估计的方差损失。
- Privacy-Shielded Image Compression: Defending Against Exploitation from Vision-Language Pretrained Models
-
提出了 Privacy-Shielded Image Compression (PSIC),通过在学习图像压缩解码阶段注入条件触发偏置,实现一条码流的双模式解码——默认模式保留视觉感知质量但屏蔽 VLP 模型的语义理解,授权模式则完整恢复图像语义,从而在压缩阶段为用户提供即插即用的隐私保护能力。
- Private Model Personalization Revisited
-
提出 Private FedRep 算法,在用户级差分隐私 (DP) 约束下通过交替最小化框架学习共享低维嵌入 \(U^* \in \mathbb{R}^{d \times k}\)(\(k \ll d\)),将隐私误差项相比先前工作 Jain et al. 降低 \(\widetilde{O}(dk)\) 倍,且适用于更广泛的 sub-Gaussian 分布(而非仅限高斯),并通过 Johnson-Lindenstrauss 变换给出维度无关的分类风险界。
- TuCo: Measuring the Contribution of Fine-Tuning to Individual Responses of LLMs
-
提出 Tuning Contribution (TuCo) 指标,通过将微调后 LLM 的前向传播精确分解为预训练分量 (PTC) 和微调分量 (FTC),首次实现在推理时逐 prompt 量化微调对模型输出的贡献,并揭示越狱攻击通过削弱 FTC 幅度来绕过安全防护。
- Can One Safety Loop Guard Them All? Agentic Guard Rails for Federated Computing
-
提出 Guardian-FC——首个后端无关的联邦计算统一安全框架,通过 Agentic-AI 控制平面的有限状态安全循环(Sense→Predict→Act→Prove)统一监管 FHE、DP、MPC 等异构隐私机制,实现一套 guard-rail 逻辑跨所有隐私后端的一致性安全执行。
- Cascade: Token-Sharded Private LLM Inference
-
提出 Cascade——一种基于 token 维度分片的多方推理协议,通过将隐藏状态按 token 维度分发给不同计算节点,避免密码学原语的高昂开销,在保持抵抗 vocab-matching 攻击能力的同时实现比 SMPC 方案快 100× 的推理速度。
- Connecting Thompson Sampling and UCB: Towards More Efficient Trade-offs Between Privacy and Regret
-
提出 DP-TS-UCB 算法,通过限制高斯采样次数并复用最大模型值,在 Thompson Sampling 和 UCB 之间建立连接,实现 \(\tilde{O}(T^{0.25(1-\alpha)})\)-GDP 隐私保证和 \(O(K\ln^{\alpha+1}(T)/\Delta)\) 遗憾上界的参数化权衡。
- Disparate Conditional Prediction in Multiclass Classifiers
-
提出 Disparate Conditional Prediction (DCP) 度量从二分类到多类分类的扩展,通过局部优化和线性规划方法为多类分类器的公平性偏离程度提供上下界估计,支持在混淆矩阵已知或仅有人口级别统计信息两种场景下进行公平性审计。
- Quadratic Upper Bound for Boosting Robustness
-
利用交叉熵损失关于 logit 的凸性,推导出对抗训练损失的二次上界 (QUB),作为即插即用的损失函数替换应用于现有快速对抗训练方法,显著提升鲁棒性。
- Theoretically Unmasking Inference Attacks Against LDP-Protected Clients in Federated Vision Models
-
首次为联邦学习中基于全连接层和自注意力层的主动成员推断攻击(AMI)在LDP保护下推导出理论成功率的上下界,揭示即使在LDP保护下,隐恓风险仍依赖于隐私预算 \(\varepsilon\),且要有效缓解攻击所需的噪声会严重损害模型效用。
- Retraining with Predicted Hard Labels Provably Increases Model Accuracy
-
在噪声标签场景下,用模型自身预测的硬标签(0/1)对训练集重新标注并重训练,可以可证明地提升分类精度;进一步提出共识筛选策略(仅对预测标签与给定标签一致的样本重训练),在标签差分隐私训练中无额外隐私代价即可大幅提升性能。