返回
Federated learning with clustered hyperparameter optimization
DOI:10.1016/j.ins.2025.122937.png)
摘要
En 中文
超参数调优对于提升机器学习模型性能至关重要。然而,超参数调优过程可能计算成本高昂——通常,整个超参数空间并未被搜索,而是采用某些启发式或统计指导的优化算法。在联邦学习中,由于存在大量客户端模型,对每个模型进行超参数调优变得成本过高。在本工作中,我们提出了一种高效方法来调优超参数,通过基于梯度更新对客户端进行聚类,并针对每个聚类分别调优超参数。我们证明,与联邦平均算法相比,我们提出的方法在i.i.d.和非i.i.d.设置下均能实现更快的收敛。
Keyword:
Federated learning
Bayesian optimization
Hyperparameter tuning
Clustering
期刊
IF:
6.8
论文数:
553
被引数:
6.2W
机构
引用论文
Hyperparameter Optimization for Transfer Learning of VGG16 for Disease Identification in Corn Leaves Using Bayesian Optimization
Big Data
IF0
Ensemble learning models with a Bayesian optimization algorithm for mineral prospectivity mapping
Ore Geology Reviews
IF3.6
Gradient-based learning applied to document recognition基于梯度的学习在文档识别中的应用
PROCEEDINGS OF THE IEEE
IF25.9

