arrow
返回

PHITS: A Parallel Hyperlink-Induced Topic Search Algorithm with Graph Partitioning and Communication Optimization

delete2026-01-01
delete0
PRE
AI
X
X Chen
X
Xiaoshuang Xing *
O
Ou, Mengjiao
J
Jialin Chen
X
Xiaoyu Ma
DOI:10.1007/978-3-032-10466-3_36delete
delete原文链接
delete原文求助
delete分享
delete收藏
摘要

摘要

En 中文
在大数据时代,Hyperlink-Induced Topic Search(HITS)算法在处理大规模网页链接数据时的效率已成为关键问题。为解决传统串行HITS算法在处理海量网页链接图时的低效问题,本文提出了一种新型并行HITS算法。该算法的核心在于对网页链接图的合理分区。通过采用基于图的分区方法,将大规模网页链接图划分为多个子图,每个子图分配给一个计算节点,使各节点能独立计算其分配子图中网页的权威值和中心值。此外,为减少并行计算过程中的通信开销,我们进一步设计了数据压缩和异步通信策略。前者应用于传输前的网页链接数据,有效减少传输数据量;后者使处理单元在等待数据传输时能执行其他任务,从而提高资源利用率。实验结果表明,所提出的并行HITS算法不仅保持了原始HITS算法的准确性,还显著提升了计算效率。
Keyword:
Parallel HITS Algorithm
Graph Partitioning
Communication Optimization
Distributed Computing

期刊

N
NETWORK AND PARALLEL COMPUTING, NPC 2025, PT II
IF:
0
论文数:
27
被引数:
0

机构

S
suzhou university of technology
学者数:
282
论文数: 127
被引数: 0
引用论文

引用论文

err分享
err收藏
CiteSeer x : A Scholarly Big Dataset
err2014-01-01
err0
PREAI
errCornelia Caragea; Jian Wu; Alina Ciobanu; Kyle Williams; Juan Fernández-Ramírez; Hung-Hsuan Chen; Zhaohui Wu; Lee Giles
err分享
err收藏
Protocol-Based Asynchronous Filtering for Interval Type-2 Fuzzy Systems With Time-Varying Saturation Function
err2024-05-01
err2
PREAI
errCheng, Jun; Zhang, Qiongwen; Zhang, Dan; Yan, Huaicheng; Chadli, Mohammed; Qi, Wenhai
err分享
err收藏
学者 查看更多内容