kafka
文章平均质量分 63
千里风雪
个人比较喜欢打台球, 篮球, 跑步, 平时没事敲敲代码, 听听歌
展开
-
kafka 报错: LEADER_NOT_AVAILABLE
重装kafka的时候, 出现了如下报错:Error while fetching metadata with correlation id 2 : LEADER_NOT_AVAILABLELEADER_NOT_AVAILABLE 是因为无法识别 kafka 的hostname重装的步骤1: 停止kafka2: 登入zookeeper, 删除kafka的依赖[hadoop@fdc01 bin]$ ./zookeeper-client[zk: localhost:2181(CONN.原创 2021-03-23 14:54:03 · 9310 阅读 · 0 评论 -
The request included a message larger than the max message size the server will accept.
org.apache.flink.streaming.connectors.kafka.FlinkKafkaException: Failed to send data to Kafka: The request included a message larger than the max message size the server will accept. at org.apache.flink.streaming.connectors.kafka.FlinkKafkaProducer.ch..原创 2021-01-12 16:48:16 · 1533 阅读 · 0 评论 -
kafka 多消费者实现
kafka官网:http://kafka.apache.org/quickstart目录kafka简单介绍:实现方式 1:kafka分区2: 实现结果3:kafka的consumer代码4:kafka生产者kafka简单介绍(网上找的): 实现方式 必要条件: kafka配置: > b...原创 2018-12-05 10:55:05 · 18313 阅读 · 3 评论 -
CopyOnWrite思想
转载:https://mp.weixin.qq.com/s/NqHzFxMd46ll1nTaSMNQew目录读多写少的场景下引发的问题?引入 CopyOnWrite 思想解决问题CopyOnWrite 思想在Kafka源码中的运用“今天聊一个非常硬核的技术知识,给大家分析一下CopyOnWrite思想是什么,以及在Java并发包中的具体体现,包括在Kafka内核源码中...转载 2019-05-13 14:06:10 · 147 阅读 · 0 评论 -
spark streaming demo (java 1.8)
spark streaming demo 使用java 1.8从kafka获取数据, 写入redis的一个简单demo发送给kafka的数据包:{'type': 'Data', 'values': [{'compID': '3333', 'name': '冷却油压力', 'serial_num': '1', 'time': '2019-06-18 16:49:51', 'gat...原创 2019-06-18 16:55:40 · 1043 阅读 · 0 评论