2024 GIAC 全球互联网架构大会：拓数派向量数据库 PieCloudVector 架构设计与案例实践

OpenPie｜拓数派

已于 2024-07-03 10:01:30 修改

阅读量641

点赞数 4

分类专栏： PieCloudDB Database | 拓数派文章标签：架构 PieCloudDB OpenPie 拓数派向量数据库 PieCloudVector 大模型

于 2024-05-29 15:40:43 首次发布

本文链接：https://blog.csdn.net/openpie/article/details/139297383

版权

PieCloudDB Database | 拓数派专栏收录该内容

62 篇文章 0 订阅

订阅专栏

5月24-25日，msup 和高可用架构联合举办了第11届 GIAC 全球互联网架构大会。会议聚焦“共话AI技术的最新进展、架构实践和未来趋势”主题，邀请了 100 余位行业内的领军人物和革新者，分享”Agent/RAG 技术、云原生、基座大模型“等多个热门技术领域的案例实践。

在本次大会中，拓数派向量数据库负责人邱培峰受邀参与并在『Agent技术/RAG技术』分会场发表了《大模型时代下向量数据库的设计与应用》主题演讲，详细介绍了云原生向量数据库 PieCloudVector 的设计与实践。

PieCloudVector 是拓数派旗下大模型数据计算系统 PieDataCS 的第二款数据计算引擎。除 PieCloudVector，PieDataCS 目前还支持云原生虚拟数仓 PieCloudDB Database，机器学习引擎 PieCloudML 两款计算引擎。

向量数据库作为一种新型数据库，因其高效的数据存储和检索能力，已经成为大模型时代的关键技术之一。向量数据库主要分为两种技术流派：一派是以向量搜索算法为基础，围绕其核心算法补充配套功能；另一派则是以传统关系型数据库为基础，通过扩展提供通过 sql 语句搜索向量的功能。而拓数派在设计 PieCloudVector 时，充分考虑两个方向的优劣势，将 Faiss 算法库作为向量搜索引擎，并与自研的关系型数据库对接起来，既提高了向量检索的性能，同时具备处理通用数据的能力。

拓数派打造的云原生向量数据库 PieCloudVector 支持多种索引类型和主流检索算法（IVF、HNSW等），并对 Faiss OpenMP 线程进行大量改造，避免无效线程，大幅提升 QPS，降低内存占用。此外，PieCloudVector 可兼容国产软硬件环境，并通过了信通院认证测试，满足自主可控的要求。