ModaHub AI模型开源社区——向量数据库Milvus存储操作教程

目录

存储操作

数据插入

数据落盘

定时触发

客户端触发

缓冲区达到上限触发

数据合并

建立索引

删除

删除集合

删除分区

删除实体

数据段整理

数据读取

常见问题

---

存储操作

阅读本文前，请先阅读 存储相关概念。

数据插入

客户端通过调用 insert 接口来插入数据，单次插入的数据量不能大于 256 MB。插入数据的流程如下：

1. 服务端接收到插入请求后，将数据写入预写日志（WAL）。
2. 当预写日志成功记录后，返回插入操作。
3. 将数据写入可写缓冲区（mutable buffer）。

每个集合都有独立的可写缓冲区。每个可写缓冲区的容量上限是 128 MB。所有集合的可写缓冲区总容量上限由系统参数 insert_buffer_size 决定，默认是 1 GB。

数据落盘

缓冲区中的数据落盘有三种触发机制：

定时触发

系统会定时触发落盘任务。定时间隔由系统参数 auto_flush_interval 决定，默认是 1 秒。

落盘操作的流程如下