有了Milvus Cloud向量数据库，我们还需 SQL 数据库吗？

最新推荐文章于 2024-10-20 21:16:19 发布
最新推荐文章于 2024-10-20 21:16:19 发布
阅读量1k 收藏 19
点赞数 21
分类专栏： 《向量数据库指南》 VectorDBBench——向量数据库评测工具 《实战AI智能体》 文章标签： 数据库 milvus 人工智能 向量数据库 Milvus Cloud
大禹智库
本文链接：https://blog.csdn.net/qinglingye/article/details/135437524
版权
本文介绍了如何使用Milvus Cloud进行混合查询，无需额外的SQL数据库。通过Milvus，用户可以在进行向量搜索的同时依据标量数据进行条件过滤，实现精准的‘向量搜索+标量过滤’。教程展示了在Zilliz Cloud上创建和使用Pipelines进行数据上传、向量提取、标量过滤的过程，以及通过API接口进行搜索的方法。
摘要由CSDN通过智能技术生成

“除了向量数据库外，我是否还需要一个普通的 SQL 数据库？”

这是我们经常被问到的一个问题。如果除了向量数据以外，用户还有其他标量数据信息，那么其业务可能需要在进行语义相似性搜索（https://zilliz.com.cn/glossary/%E8%AF%AD%E4%B9%89%E6%90%9C%E7%B4%A2-%EF%BC%88semantic-search%EF%BC%89）前先根据某种条件过滤数据，例如：

  • 在法律领域，可能只需要从某个特定数据库中搜索相关的法律条款；

  • 在零售业，可能需要搜索某个尺码的男鞋；

  • 在图像搜索时，可能希望搜索 2010-2016 年上映且 IMDB 电影评分高于 7.0 的电影的海报。

对此，我们的答案是——不需要。用向量数据库 Milvus Cloud或全托管的 Milvus 服务——Zilliz Cloud，就无需额外再维护一个 SQL 数据库存储标量了。只要一个系统，用户便可起送实现“向量搜索+标量过滤”的混合查询，从而获取更精准的搜索结果。

其中，Milvus（https://zilliz.com/what-is-mi

了解本专栏 订阅专栏 解锁全文 超级会员免费看
大禹智库
关注
专栏目录
订阅专栏
ModaHub魔搭社区：将图像数据添加至Milvus Cloud向量数据库中
实战AI智能体
08-28 344
在本项目中，我们是保存文件路径、明星名字、分割 ID，并将其作为元数据，后续还会考虑添加更多字段，例如边界框、mask 位置等。每 128 张图像作为一批数据，我们将其转化为向量并插入到 Milvus 中，然后清空这批数据。输出是 PyTorch tensor，长度为 128，输出中的每条数据长度为 2048。随后，插入新的数据列表，其中包括原数据中的最后三条以及由 tensor 输出转化而来的数据列表，这些数据对应文件路径、名称、分割 ID、2048 维向量。最后，将图像及元数据添加到数据批处理中。
《向量数据库指南》——Milvus Cloud构建 RAG
实战AI智能体
11-15 465
如果数据不够准确，检索可能返回无关的结果。如果 Embedding 模型无法理解特定领域内容的语义，不论使用什么数据库，检索器都有可能给出错误的结果。当进行检索时，top-K 是一个重要参数，它控制检索到的上下文分块数量。因此，对于简单的问题，一般情况下推荐较低的 top-K 值，这样检索性能和结果都更佳。因此我们需要根据自己的使用场景和需求，用评估工具来评价不同的配置选择在具体用例中的质量。在构建高效的 RAG 式 LLM 应用程序时，我们有许多可以优化的配置，不同配置的选择极大影响了检索质量。
有了向量数据库，我们还需 SQL 数据库吗？
ZILLIZ
12-28 1339
Zilliz Cloud 是全托管的 Milvus 服务，将用户的数据库部署在 Serverless 云服务器上，但我们仍旧可以通过调用 PyMiluvs API 接口在本地使用 Zilliz Cloud 向量数据库。Milvus 会对向量字段创建向量索引并进行向量相似性搜索，与此同时，还可以通过表达式对搜索结果进行元数据过滤。如需获取 Pipeline ID，请先在 Pipelines 列表页找到 Search Pipeline，随后在 Pipeline ID 一栏中复制该 Pipelines 的ID。
全面对比与选择指南：Milvus、PGVector、Zilliz及其他向量数据库
全世界的博客
06-17 3753
向量数据库是专门设计来处理和存储高维向量数据的数据库系统。高效的相似性搜索：向量数据库能够快速地在大量高维向量中找到最相似的向量，这对于图像识别、语音识别和推荐系统等应用至关重要。支持多种索引类型：如IVF_FLAT、IVF_SQ8、HNSW等，这些索引类型可以根据不同的应用场景和性能需求进行选择。动态扩展性：随着数据量的增加，向量数据库能够通过增加节点或资源来扩展其处理能力，确保系统的性能不受影响。支持复杂的查询和过滤。
一文详解向量数据库Milvus Cloud动态 Schema
实战AI智能体
01-10 1319
看到这里，相信大家对于如何在 Milvus Cloud中使用动态 Schema 有了更深的认识，需要提醒大家的是，动态Schema 功能拥有 A、B 两面，一方面提供了动态 Schema 设置简便，为用户提供灵活性和高效率。过滤查询结合了ANNS（近似最近邻）搜索和基于动态和静态字段的标量过滤，查询的目的是检索满足expr参数中指定条件的数据，输出包括title、author、claps和isbn字段，expr参数允许基于 Schema 字段（或称之为静态字段）title和动态字段claps进行过滤。
有了向量数据库，我们还需要 SQL 关系型数据库吗？
musicml的博客
01-08 454
▼最近直播超级多，预约保你有收获今晚直播：《高吞吐量实时场景向量数据库应用实战》—1—除了向量数据库外，是否还需要 SQL 关系型数据库？最近经常被问到这问题“有了向量数据库，我们是否还需要 SQL 关系型数据库呢？”如果用户除了向量数据查询以外，还有其他 SQL 数据查询（简称：标量数据），那么用户的业务流程可能是以下的情况：第一步：根据某种条件先过滤数据（标量查询）；第二步：继续进行语义相似...
全面对比与选择指南：pgvector与Milvus向量数据库
全世界的博客
08-02 1798
pgvector是一个开源的向量相似性搜索插件，专为PostgreSQL数据库设计。它允许用户在PostgreSQL中存储和查询向量数据，利用PostgreSQL的强大功能和生态系统来处理高维向量。pgvector的核心优势在于其易于集成和使用，用户无需迁移现有的PostgreSQL数据库，只需安装插件即可开始使用向量搜索功能。开源免费：作为PostgreSQL的插件，pgvector继承了PostgreSQL的开源特性，用户可以免费使用。易于集成。
用向量数据库Milvus Cloud 搭建AI聊天机器人
实战AI智能体
10-05 418
接着，Gradio 界面通过这些函数搭建聊天机器人。为了使 LLM 回答更准确，我们需要存储用户和机器人的聊天记录，并在查询时调用这些记录，可以用 SQLite 实现聊天记录的管理。首先，需要一些函数通过 UUID 来创建 session ID ，接受并响应界面上的用户查询。这个 Pipeline 搭建成功了！在连接至图形用户界面（GUI）前，我们需要先测试以下这个 Pipeline。至此，一个结合向量检索和 LLM 生成的智能聊天机器人就搭建完成啦！搭建一个 Pipeline 将查询传递至 LLM 中。
向量数据库介绍
TYLZVS007的博客
08-09 2026
本文是向量数据库的科普文，介绍了向量数据库的概念、应用场景、选择向量数据库产品的考虑点，最后以PostgreSQL向量扩展示例展示向量数据库的使用。
#MySQL `SELECT` 语句执行流程详解
h123372868的博客
10-20 482
MySQL 的 `SELECT` 语句执行流程是一个复杂而高效的过程。它涉及多个组件的协作：连接器负责连接管理，解析器和预处理器确保语句合法，优化器生成最优执行计划，而执行器和存储引擎则负责实际的数据检索工作。理解这一流程可以帮助我们更好地优化查询，提升数据库性能。
OpenHarmony 目前所有体系详细介绍
最新发布
2301_80035882的博客
10-20 404
一、OpenHarmony 操作系统介绍 二、OpenEuler 服务器操作系统介绍 三、OpenGauss 关系型数据库介绍 四、昇腾AI介绍 五、harmonyOS 云服务
plsql查询Oracle数据库发现有的数据是乱码
qq_29270805的博客
10-17 460
客户端发送数据：数据 “一二三四五六” 以AL32UTF8字符集编码，即。数据传输：数据通过网络传输到数据库服务器。数据接收与转换：数据库接收到数据后，将其从AL32UTF8转换为ZHS16GBK，即。存储数据：转换后的数据以ZHS16GBK字符集存储在数据库中。
基于SSM班级事务管理系统的设计
2401_87849773的博客
10-15 425
管理员账户功能包括：系统首页，个人中心，学生管理，班委管理，班会组织管理，健康档案管理，党员发展管理，党员培训管理，学生成绩管理。主要技术：Java,Spring,mybatis,mysql,jquery,html。班委账号功能包括：系统首页，学生管理，学生成绩管理，活动信息管理，班费通知管理。服务器：SpringBoot自带 apache tomcat。JDK版本：Java JDK1.8。数据库可视化工具： navicat。数据库版本： mysql5.7。开发系统：Windows。
Rdis的应用，示例，四种模式单机模式、主从模式、哨兵模式、集群模式
weixin_66568937的博客
10-16 686
为此， Redis 提供了复制（replication）功能，可以实现当一台数据库中的数据更新后，自动将更新的数据同步到其他数据库上。主从模式在很多系统设计时都会考虑，一个master挂在多个slave节点，当master服务宕机，会选举产生一个新的master节点，从而保证服务的高可用性。从上面很容易就想到一个问题，既然主从复制，意味着master和slave的数据都是一样的，有数据冗余问题。替换原来的故障节点。刚刚提到了，主从模式，当主节点宕机之后，从节点是可以作为主节点顶上来，继续提供服务的。
MySQL查询优化：提升数据库性能
apple_64847327的博客
10-17 900
MySQL查询优化是一个涉及多个层面的复杂过程，需要我们从索引设计、查询语句编写、数据类型选择、服务器配置等多个角度进行综合考虑。通过不断学习和实践，我们可以逐渐掌握这门艺术，从而提升我们的数据库性能，为用户提供更快更好的服务。优化是一个持续的过程，随着数据量的增长和查询模式的变化，我们需要不断地回顾和调整我们的优化策略。
mysql锁之乐观锁、悲观锁、表锁、行锁、共享锁、排他锁
qq_68883928的博客
10-14 662
锁是计算机协调多个进程或线程并发访问某一个资源的机制，在数据库中，除传统的计算资源（CPU、RAM、I/O）的争用以外，数据也是一种供许多用户共享的资源。如何保证数据并发访问的一致性、有效性是所在有数据库必须解决的一个问题，锁冲突也是影响数据库并发访问性能的一个重要因素。从这个角度来说，锁对数据库而言显得尤其重要，也更加复杂。
快速构建SpringBoot项目
qq_38527427的博客
10-14 765
下文将简述如何快速构建一个SpringBoot项目，使用SpringData JPA实现持久层访问，集成lombok、swagger2及集成thymeleaf进行页面展示。
Go 项目如何集成类似mybatisPlus插件呢？GORM走起!!
童龙辉的博客
10-16 995
Go 项目中，虽然没有像 MyBatis Plus 这样特定的 ORM 插件，但可以使用功能相似的 Go ORM 框架，比如 GORM，它支持链式查询、自动迁移、预加载等功能，与 MyBatis Plus 有相似之处。通过一些插件或扩展，可以实现更丰富的功能，比如软删除、分页查询等
SQLite数据库在Android中的应用及操作方式
Good_tea_h的博客
10-14 830
SQLite数据库在Android中的应用非常广泛，它作为一个轻量级的关系型数据库，以其高效、可靠和易于使用的特点，成为了Android平台上存储和管理数据的首选方案。以下是对SQLite数据库在Android中的应用及操作方式的详细介绍。
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包

打赏作者

大禹智库

大禹智库——河南第一民间智库

¥1 ¥2 ¥4 ¥6 ¥10 ¥20
扫码支付：¥1
获取中
扫码支付

您的余额不足，请更换扫码支付或充值

打赏作者

实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值