.png){kind=icon}
返回
PDSP-BENCH: A Benchmarking System for Parallel and Distributed Stream Processing
.png){kind=icon}
PRE
AI
DOI：10.1007/978-3-031-93858-0_1.png)
.png){kind=icon}
原文求助.png){kind=icon}
分享.png){kind=icon}
收藏
摘要
En 中文
本文介绍了PDSP-Bench，一种新型基准测试系统，旨在系统性地理解分布式环境中并行流处理性能。这种理解对于确定流处理系统（SPS）如何利用算子并行性和可用资源来处理现代应用的大规模工作负载至关重要。现有基准测试系统主要关注在同质化集中式环境中使用具有顺序算子流水线的查询来分析SPS。与之不同，PDSP-Bench强调分布式异构环境中的并行流处理方面，并同时允许集成机器学习模型用于SPS工作负载。在我们的结果中，我们使用源自真实应用和合成查询的并行查询结构对知名SPS Apache Flink进行基准测试，以展示PDSP-Bench在并行流处理方面的能力。此外，我们通过展示模型和训练效率的比较，在PDSP-Bench上生成的SPS工作负载上比较了不同的学习成本模型。我们展示了使用PDSP-Bench实验得出的关键观察结果，这些结果突出了不同查询工作负载下的有趣趋势，如性能中的非线性关系和并行性的悖论效应。
Keyword:
Parallel and distributed stream processing
Benchmark
期刊
P
IF:
0
论文数:
8
被引数:
0
机构
引用论文
.png){kind=icon}
分享收藏TPCx-AI - An Industry Standard Benchmark for Artificial Intelligence and Machine Learning SystemsTPCx-AI - 人工智能和机器学习系统的行业标准基准
PREAI
分享收藏
查看更多内容