Adaptive Byzantine-robust differentially private federated learning

联邦学习能够在数据本地私有的前提下实现跨设备协同训练, 但在实际应用中仍面临隐私泄露和投毒攻击两大安全瓶颈. 差分隐私和鲁棒聚合作为各自领域的主流防御方法, 在耦合应用时存在固有的内在冲突:差分隐私所注入的随机噪声一方面放大了良性更新的分布方差, 另一方面也为恶意更新的系统性偏移提供了掩护, 使得两者难以有效区分. 为此, 本文提出自适应拜占庭鲁棒差分隐私联邦学习方法 AByzDPFL, 旨在通过降低噪声维度并放大几何差异来提高可区分度. 在客户端侧, 基于Fisher信息的私有选择机制动态筛选关键参数坐标, 仅在该低维子空间中注入噪声并完成更新, 从而显著减少噪声维度, 降低良性模型的方差. 在服务器侧, 使用谱嵌入降维突出本征几何结构, 随后根据噪声尺度自适应聚类半径, 从而包容受噪声扰动的良性模型, 并有效剔除超出噪声范围的系统性偏移. 进一步地, 通过自适应中值范数裁剪抑制簇内的高幅值异常更新. 理论分析证明了所提方法的隐私损失和收敛性上界, 实验表明 AByzDPFL 在兼顾隐私性和鲁棒性的同时, 性能优于现有的主流基线.

Authors

Publication Details

Journal
Scientia Sinica Informationis
Published
2025-08-28
DOI
https://doi.org/10.1360/ssi-2025-0232
Primary Topic
Privacy-Preserving Technologies in Data
Type
article
Field-Weighted Citation Impact
0.00
Controls
|||
ALL TIME
JAN
FEB
MAR
APR
MAY
JUN
JUL
AUG
SEP
OCT
article

Adaptive Byzantine-robust differentially private federated learning

Qinnan Zhang, Yongxin Tong, Zuying Chai, Wangjie Qiu et al.
1 links
Scientia Sinica Informationis
Privacy-Preserving Technologies in Data
article

Adaptive Byzantine-robust differentially private federated learning

Qinnan Zhang, Yongxin Tong, Zuying Chai, Wangjie Qiu, Sheng Gao, Yuhua Wang, Jianming Zhu, Zhiming Zheng
article en

Abstract

联邦学习能够在数据本地私有的前提下实现跨设备协同训练, 但在实际应用中仍面临隐私泄露和投毒攻击两大安全瓶颈. 差分隐私和鲁棒聚合作为各自领域的主流防御方法, 在耦合应用时存在固有的内在冲突:差分隐私所注入的随机噪声一方面放大了良性更新的分布方差, 另一方面也为恶意更新的系统性偏移提供了掩护, 使得两者难以有效区分. 为此, 本文提出自适应拜占庭鲁棒差分隐私联邦学习方法 AByzDPFL, 旨在通过降低噪声维度并放大几何差异来提高可区分度. 在客户端侧, 基于Fisher信息的私有选择机制动态筛选关键参数坐标, 仅在该低维子空间中注入噪声并完成更新, 从而显著减少噪声维度, 降低良性模型的方差. 在服务器侧, 使用谱嵌入降维突出本征几何结构, 随后根据噪声尺度自适应聚类半径, 从而包容受噪声扰动的良性模型, 并有效剔除超出噪声范围的系统性偏移. 进一步地, 通过自适应中值范数裁剪抑制簇内的高幅值异常更新. 理论分析证明了所提方法的隐私损失和收敛性上界, 实验表明 AByzDPFL 在兼顾隐私性和鲁棒性的同时, 性能优于现有的主流基线.

Scientia Sinica InformationisVol. 55(11)
Openalex Percentile: Top 88%
Privacy-Preserving Technologies in Data
AI Navigator

Ask Laika to Summarize, Analyze, and Connect papers live on the map.

Summarize Papers & Methodologies

Extract key findings, datasets, and comparative methods across publications.

Benchmark Rankings & Visual Analytics

Rank top research institutions, authors, funders, topics, and journals by Field-Weighted Citation Impact (FWCI) and paper volume with instant charts.

Connect Distant Disciplines

Bridge topological clusters on the map to find hidden collaborative intersections.