arrow
返回

Gradient-driven data-free sample balancing for robust hierarchical federated learning

delete2025-12-12
delete0
PRE
AI
B
Bo Peng
X
X. Wang
B
Bo Yi
Y
Ying Li
M
Min Huang
L
Lixing Wang
DOI:10.1016/j.knosys.2025.115107delete
delete原文链接
delete原文求助
delete分享
delete收藏
摘要

摘要

En 中文
随着边缘设备的快速普及,传统的星型拓扑联邦学习架构越来越难以满足现代生产环境的需求。因此,层次联邦学习已逐渐成为主流范式。然而,传统的层次联邦学习框架仍面临关键挑战,尤其是在处理客户端数据异质性方面。客户端数据的差异性会沿层次结构向上传播,最终导致严重的模型漂移。现有缓解漂移的方法主要依赖于引入控制变量来纠正偏差。尽管这些方法在一定程度上有效,但它们既不能从根本上阻止漂移的产生,也无法阻断其跨层传播。因此,开发更有效的解决方案仍是一个开放性挑战。为此,本文提出了HFLsg(梯度驱动的无数据样本平衡鲁棒层次联邦学习)。在宏观层面,HFLsg采用了一种样本平衡策略,动态调整组内客户端的分布,从而间接平衡组级数据样本。这种设计约束了层次结构底层的模型漂移,防止其向上扩散。在微观层面,HFLsg引入了梯度校正机制,以自顶向下的方式调整梯度,进一步抑制漂移的影响。此外,通过确保高层模型的稳定性,样本平衡策略还有助于更有效的梯度校正。通过宏观分布与微观优化的联合调控,HFLsg显著降低了模型漂移的发生。

期刊

K
Knowledge-Based Systems
IF:
7.6
论文数:
1.3W
被引数:
4.5W

机构

N
northeastern university
学者数:
4.4K
论文数: 1.9K
被引数: 2
引用论文

引用论文

VARF: An Incentive Mechanism of Cross-Silo Federated Learning in MECVARF: MEC中跨孤岛联邦学习的激励机制
err2023-09-01
err11
PREAI
errLi, Ying; Wang, Xingwei; Zeng, Rongfei; Yang, Mingzhou; Li, Kexin; Huang, Min; Dustdar, Schahram
err分享
err收藏
Adaptive Federated Learning in Resource Constrained Edge Computing Systems资源受限边缘计算系统中的自适应联合学习
err2019-06-01
err1.4K
errOAAI
errWang, Shiqiang; Tuor, Tiffany; Salonidis, Theodoros; Leung, Kin K.; Makaya, Christian; He, Ting; Chan, Kevin
err分享
err收藏
Distributed AI in Zero-Touch Provisioning for Edge Networks: Challenges and Research Directions边缘网络零接触配置中的分布式AI: 挑战和研究方向
err2024-03-01
err0
errOAAI
errAbhishek Hazra; Andrea Morichetta; Ilir Murturi; Lauri Lovén; Chinmaya Kumar Dehury; Víctor Casamayor Pujol; Praveen Kumar Donta; Schahram Dustdar
err分享
err收藏
Geometric Deep Learning Going beyond Euclidean data
err2017-07-01
err2.2K
errOAAI
errBronstein, Michael M.; Bruna, Joan; LeCun, Yann; Szlam, Arthur; Vandergheynst, Pierre
err分享
err收藏
Federated Learning for Internet of Things: A Comprehensive Survey物联网的联合学习: 综合调查
err2021-01-01
err527
errOAAI
errNguyen, Dinh C.; Ding, Ming; Pathirana, Pubudu N.; Seneviratne, Aruna; Li, Jun; Poor, H. Vincent
err分享
err收藏
HED-FL: A hierarchical, energy efficient, and dynamic approach for edge Federated Learning
err2023-05-01
err17
errOAAI
errDe Rango, Floriano; Guerrieri, Antonio; Raimondo, Pierfrancesco; Spezzano, Giandomenico
err分享
err收藏
学者 查看更多内容