arrow
返回

SMDG: Enhancing In-Memory Dynamic Graph Processing With Storage-Class Memory

delete2026-03-23
delete0
PRE
AI
T
Tongfeng Weng
M
Mo Sha
周旭 封面图
周旭 (Xu Zhou)
J
Jingjing Lu
W
Wentao Huang
K
K. L. Li
K
Kian‐Lee Tan
DOI:10.1109/TKDE.2026.3676514delete
delete原文链接
delete原文求助
delete分享
delete收藏
摘要

摘要

En 中文
内存内动态图处理面临三大关键挑战:有限的DRAM容量、并发更新/查询处理效率低下以及易受崩溃影响。传统的段级系统在新兴存储级内存(SCM)上面临写入放大问题,而现有的持久化内存系统则受粗粒度同步和高恢复开销困扰。本研究提出存储级内存动态图(SMDG)处理框架,这是一个以块为原子单位贯穿存储、并发和恢复的架构级重新设计。该系统通过三项关键创新解决这些挑战。首先,块级存储设计在异构DRAM-SCM架构上以固定大小块粒度组织邻接数据,采用缓冲批量写入显著减少写入放大,同时保持对数更新复杂度。其次,块级多版本并发控制通过按顶点读写同步维护时间戳块版本,为并发查询提供任务有序快照可见性,无需复制整个顶点或页面。第三,块级崩溃恢复协议采用去中心化按顶点日志,实现独立并行重建,在保证应用级语义一致性的同时比顺序方法实现快得多的恢复。实验结果表明,这种统一的块级设计提高了更新效率,在控制内存开销下支持混合更新-查询工作负载,并与之前的动态图系统相比加速了崩溃恢复。
Keyword:
Dynamic graph
MVCC
packed-memory array
storage-class memory

期刊

IEEE Transactions on Knowledge and Data Engineering 封面图
IEEE Transactions on Knowledge and Data Engineering
IF:
10.4
论文数:
6.9K
被引数:
3.2W

机构

A
alibaba cloud
学者数:
39
论文数: 10
被引数: 1
H
hunan university
学者数:
4.5W
论文数: 3.3W
被引数: 70
N
National University of Singapore
学者数:
7.6W
论文数: 6.5W
被引数: 11.4W
学者 查看更多机构
引用论文

引用论文

err
IF0
err
err0
PREAI
err
err分享
err收藏
err分享
err收藏
GRFusion
err2018-05-27
err0
PREAI
errHassan,Mohamed S.; Kuznetsova,Tatiana; Jeong,Hyun Chai; Aref,Walid G.; Sadoghi,Mohammad
err分享
err收藏
An adaptive packed-memory array
err2007-11-01
err0
errOAAI
errMichael A. Bender; Haodong Hu
err分享
err收藏
An efficient similarity search framework for SimRank over large dynamic graphs
err2015-04-01
err0
PREAI
errYingxia Shao; Bin Cui; Lei Chen; Mingming Liu; Xing Xie
err分享
err收藏
A sparse table implementation of priority queues
err1981-01-01
err0
PREAI
errItai,Alon; Konheim,Alan G.; Rodeh,Michael
err分享
err收藏
Efficient Projection-Based Algorithms for Tip Decomposition on Dynamic Bipartite Graphs
err2025-02-01
err0
PREAI
errWeng,Tongfeng; Liu,Yumeng; Sha,Mo; Chen,Xinyuan; Zhou,Xu; Li,Kenli; Tan,Kian-Lee
err分享
err收藏
Pregel
err2010-06-06
err0
PREAI
errGrzegorz Malewicz; Matthew H. Austern; Aart J.C Bik; James C. Dehnert; Ilan Horn; Naty Leiser; Grzegorz Czajkowski
err分享
err收藏
err
IF0
err
err0
PREAI
err
err分享
err收藏
学者 查看更多内容