arrow
返回

Optimal subset selection for distributed local principal component analysis

delete2025-01-01
delete3
PRE
AI
G
Guangbao Guo *
G
Guoqi Qian
DOI:10.1016/j.physa.2024.130308delete
delete原文链接
delete原文求助
delete分享
delete收藏
摘要

摘要

En 中文
考虑到分布式PCA方法有时会产生较大的局部近似误差,我们提出了一种新的分布式PCA方法,称为分布式局部PCA(DLCPA),通过使用最优子集选择标准进行降维来减少误差。该方法的最优子集选择在DLCPA中的优势包括:通过精确的协方差估计提高精度、高效处理大数据集、在管理变量超出节点场景时的可扩展性、对异常值的鲁棒性、参数选择的灵活性以及跨数据分布的适应性。所涉及的低维协方差子估计器通过分布式方式计算其局部主成分获得,并计算一步平均协方差估计器。此外,均方误差(MSE)被选用来衡量所提出方法的性能,并且从最优标准中获得的最优子估计器被确定为在所有协方差子估计器中具有最小MSE值的那个。研究表明,所提出的方法不仅能提高模拟和真实数据实验中的估计精度,还能大幅节省计算时间,这在解决大数据问题方面具有良好的推广价值。
Keyword:
Data reduction
Distributed inference
Computational complexity
Local principal component analysis

期刊

P
Physica A: Statistical Mechanics and its Applications
IF:
3.1
论文数:
1.3K
被引数:
3.6W

机构

S
Shandong Univ Technol
学者数:
1.5K
论文数: 506
被引数: 212
U
Univ Melbourne
学者数:
3.4K
论文数: 1.9K
被引数: 694
引用论文

引用论文

Double L2,p-norm based PCA for feature extraction
err2021-09-01
err0
PREAI
errPu Huang; Qiaolin Ye; Fanlong Zhang; Guowei Yang; Wei Zhu; Zhangjing Yang
err分享
err收藏
STATISTICAL AND COMPUTATIONAL TRADE-OFFS IN ESTIMATION OF SPARSE PRINCIPAL COMPONENTS
err2016-10-01
err74
errOAAI
errWang, Tengyao; Berthet, Quentin; Samworth, Richard J.
err分享
err收藏
err分享
err收藏
err分享
err收藏
学者 查看更多内容