arrow
返回

GaussDB-Vector: A Large-Scale Persistent Real-Time Vector Database for LLM Applications

delete2025-08-01
delete0
PRE
AI
J
Ji Sun *
G
Guoliang Li
J
James Pan
J
Jiang Wang
R
Ruicheng Liu
聂文 封面图
聂文 (Wen Nie)
DOI:10.14778/3750601.3750619delete
delete原文链接
delete原文求助
delete分享
delete收藏
摘要

摘要

En 中文
向量数据库被广泛用作解决大型语言模型(LLM)应用弱点的根本工具,具体包括幻觉问题和高推理成本。然而,现有的向量数据库要么服务于具有低延迟内存搜索的利基应用,要么提供复杂的数据管理能力,但以低性能为代价。为解决这些局限性,我们提出GaussDB-Vector,具备低延迟可扩展搜索、实时插入和删除、高可用性、大规模分布式搜索以及混合标量-向量过滤搜索能力。这些特性主要通过为图基向量索引设计的创新存储架构实现,该架构针对I/O操作进行了优化,并能适应不同数据集大小和维度,辅以新颖的缓冲策略以进一步减少I/O负担。GaussDB-Vector支持产品量化、并行搜索,并通过SIMD、GPU和NPU实现硬件加速,从而在性能上超越竞争基线1到5倍。

期刊

P
Proceedings of the VLDB Endowment
IF:
3.3
论文数:
563
被引数:
1.2W

机构

H
huawei technologies
学者数:
3.3K
论文数: 2.9K
被引数: 1
T
Tsinghua University
学者数:
8.6K
论文数: 4.1K
被引数: 17.7W
引用论文

引用论文

SingleStore-V: An Integrated Vector Database System in SingleStoreSingleStore-V:SingleStore中的集成向量数据库系统
err2024-11-08
err0
PREAI
errChen, Cheng; Jin, Chenzhe; Zhang, Yunan; Podolsky, Sasha; Wu, Chun; Wang, Szu-Po; Hanson, Eric; Sun, Zhou; Walzer, Robert; Wang, Jianguo
err分享
err收藏
Searching in metric spaces
err2001-09-01
err774
PREAI
errChávez, E; Navarro, G; BaezaYates, R; Marroquín, JL
err分享
err收藏
The log-structured merge-tree (LSM-tree)
err1996-06-01
err0
PREAI
errPatrick O’Neil; Edward Cheng; Dieter Gawlick; Elizabeth O’Neil
err分享
err收藏
err
IF0
err
err0
PREAI
err
err分享
err收藏
学者 查看更多内容