Milvus核心组件（4）---- MinIO 结合 Kafka 的配置，使用及原理（超详细版）

目录

背景

安装 docker Kafka 环境

安装Kafka依赖

下载zookeeper

规范repository 及 version操作

运行zookeeper

安装Kafka

下载Kafka

规范repository 及 version操作

运行Kafka

命令

参数详解(制约因素)

运行Kafka

log check

kafka的基本使用

基本命令

test create topic

test producer

test consumer

运行结果

minio 配合 Kafka

启动minio

下载 kafka-python

修改 minio bucket event 接入

设置 Kafka recv 窗口

python minio upload

代码

运行结果

---

背景

前面已经介绍过minio 的基本用法及如何在server 端进行查看。今天讲一下他的进阶用法。如何在配置Kafka的基础上，完成minio 相关的event 事件发布。这种可扩展性非常的好用，再后期实际项目中可以得到广泛使用。其实 milvus 在使用minio 时，也是可以配置 Kafka 作为中间消息队列的扩展媒介。minio 的使用已经在前面讲过了，不明白可以看 Milvus 核心组件（3）--- MinIO详解_milvus-minio-CSDN博客 。今天主要讲下 Kafka的安装及使用，还有与MinIO的结合，用python 代码的方式完成整个结合过程。如果你之前不熟悉或者很少接触Kafka，又或者你不知道他与minio 怎么结合。通过本结讲解，你应该有比较透彻的理解。

安装 docker Kafka 环境