返回
Intra-query runtime elasticity
DOI:10.1007/s00778-026-01016-z.png)
摘要
En 中文
我们提出了云原生数据分析的Intra-Query Runtime Elasticity(IQRE)概念。IQRE使云原生OLAP引擎能够在查询执行过程中动态调整查询的Degree of Parallelism(DOP)。这一能力使用户能够更经济高效地利用云计算资源。我们介绍了Accordion,这是首个基于大规模并行处理模型的IQRE查询引擎。Accordion可以在查询执行过程中的任何时刻调整查询的并行度,而无需暂停数据处理。它具有用户友好的界面和一个由“what-if”服务支持的自动调谐器,允许用户根据查询延迟约束调整DOP。Accordion通过利用异构计算资源支持在运行时调整并行度。我们介绍了Accordion的实现,并展示了其易用性,说明了它如何帮助用户在满足查询时间约束的同时最小化计算资源消耗。
Keyword:
Query execution
Cloud-native
Elasticity
Degree of parallelism
期刊
IF:
3.8
论文数:
88
被引数:
2.4K
机构
引用论文
Accordion: Balancing Performance and Cost in Cloud-Native Data Analysis with Intra-Query Runtime ElasticityAccordion: 在云原生数据分析中通过查询内运行时弹性平衡性能与成本
Revisiting Runtime Dynamic Optimization for Join Queries in Big Data Management Systems重新审视大数据管理系统中的连接查询运行时动态优化

