- 博客(4)
- 收藏
- 关注
RSS订阅原创 python 控制 Kafka
往Kafka 生产数据 (写入)topic 相当于数据库的表名partition kafka集群中的一个partition_idoffset 相当于数据流的位置(seek)，偏移量bootstrap_server kafka的地址(一般是集群) import kafka server_host = 10.1.1.1 server_port = 9092 producer = ...
2020-02-24 21:10:24
236
原创 Kafka 错误代码解释
Kafka 原生API交互的Code代表使用client 与 kafka 交互时，会返回错误代码，官方给出了，代码表示的具体含义官网地址 https://kafka.apache.org/protocol示例 KeyError 36 表示 topic 已存在下表是Error code 以及相对应的关系Errorcoderetriabledescription...
2020-02-24 16:30:03
24237
原创 python 通过 API 创建kafka topic
使用 pykafka 创建 topic记得填写自己的kafka 相应的ip和portimport pykafkaclass Topic(): def __init__(self, topic_name, num_partitions=1, replication_factor=1, replica_assignment=[], config_entries=[]): ...
2020-02-24 15:51:43
5434
原创 Docker 实战(四) 搭建 kafka集群
Kafka搭建kafka是一个分布式的数据库，所以需要zookeeper作为集群的头部kafka使用广泛，在大数据处理与分析中作用很大，接下来是根据dockerHub上已有的kafka镜像进行搭建的资料来源使用 wurstmeister/zookeeper 和 wurstmeister/kafka 作为本次的镜像使用简要版本搭建dockerHub官方网站准备前提安装好...
2020-02-18 17:48:43
250
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人