图数据库 vs 向量数据库

最新推荐文章于 2024-07-15 23:07:26 发布

Foolforuuu

最新推荐文章于 2024-07-15 23:07:26 发布

阅读量1.1k

点赞数 29

文章标签：数据库

本文链接：https://blog.csdn.net/Foolforuuu/article/details/140047386

版权

最近大模型出来之后，向量数据库重新翻红，业界和市场上有不少声音认为向量数据库会极大的影响图数据库，图数据库市场会萎缩甚至消失，今天就从技术原理角度来讨论下图数据库和向量数据库到底差别在哪里，适合什么场景，图数据库会不会消失。

讨论图、向量，大模型之前先简单说下人工智能发展过程中出现的主义之争。人工智能在过去几十年的发展中，出现了好几种思路，也就分为几大学派，或者主义。分别是：

符号主义(symbolicism)，又称为逻辑主义、心理学派或计算机学派，主要就是基于逻辑推理的智能模拟方法，对应到人类智能就是认知能力（学习能力、推理能力、专家能力），知识图谱就是源于符号主义。
连接主义(connectionism)，又称为仿生学派或生理学派，其主要原理为神经网络及神经网络间的连接机制与学习算法，深度神经网络解决的就是感知智能（人类的眼、耳、鼻、舌、身对环境的感知能力），现在的大模型就是连接主义的产物，但同时因为模型参数足够大，从感知智能又突破到了认知智能，甚至未来会走向 AGI（通用人工智能）。
行为主义(actionism)，又称为进化主义或控制论学派，其原理为控制论及感知-动作型控制系统，这一派主要搞机器人。比如机器人的操控，要求机器人不光要认知和感知，还要操作和行动。nvidia的黄教主最近就各种场合讲未来是机器人的时代。

这三种主义是思路之争，其实也代表了对人工智能模拟的三个路径。未来可能会走向大一统和融合。

图数据库比起传统的信息存储和组织模式，图数据库能够很清晰揭示复杂的模式，尤其在错综复杂的社交，物流，金融风控行业效果更为明显。典型场景有：

向量数据库最早解决非结构化数据相似度检索问题。通过把非结构化数据 embedding 成向量，通过向量的相似度检索来实现非结构化数据的相似度搜索。电销场景有：

相似度检索：可以做多模态检索（文本、图片、音频、视频），推荐系统，分类系统等。典型用在
- 互联网，如电商的推荐。
- 政企，如公安的图谱搜索
- 自动驾驶，质检图谱的搜索等
语义检索：利用文本，向量的混合搜索，实现多路召回，再加上reRanker模型实现语义排序。常用于企业的搜索，实现高质量的搜索
RAG：大模型活了，搭配大模型使用，把检索结果给到大模型，实现高质量的总结。最常用的是知识库，客服，大模型记忆问答等场景。这块各行各业都在实验和创新的 copilot 就是用到了 RAG 技术。

用一张表格总结如下:

分类	说明	能做什么业务	典型场景和行业
相似度检索	向量传统应用场景，向量检索为主	多模态检索(文本、图片、音频、视频）推荐系统分类系统	互联网，电商的推荐政企，如公安的图片搜索网盘，自动驾驶里面的图片搜索
语义搜索	文本和向量混合索引替代 ES 的一些搜索场景	文档，向量混合搜索，多路召回 reranker 模型一般有Cohere Rerank（闭源）和BGE-Reranker（开源）	企业搜索，行业不限
RAG	搭配大模型使用，检索结果给大模型总结	知识库客服大模型记忆问答	各种copilot，行业不限

两者对比

图数据库擅长推理能力，但是图实体模型建立本身门槛高，需要大量专业人员。向量数据库人工介入较少，但是结果准确度就差一些，各有各合适空间。下面是两者的对比：

因此我们可以看出，向量和知识图谱还是有各自适合的范围。

如果一个业务到底要选型向量还是知识图谱，就要从多个维度去考虑，下面是建议参考和选型的维度：

目前市面上看到各个厂家都在纷纷探索向量+图的融合演进，可见的未来，大概率两者会取各自长处，进行融合解决更复杂的问题。

关注