kafka
sam-123
这个作者很懒,什么都没留下…
展开
-
kafka无法获取所有的consumergroupid?已经使用kafka-consumer-groups.sh --list --zookeeper localhost:2181
这个问题困扰了我很久。明明我在代码里面已经用某一个groupid消费了一些数据,但是kafka-consumer-groups.sh --list --zookeeper localhost:2181这个命令却没有找到那个groupid百度许久,最后谷歌还是有效,参考:https://stackoverflow.com/questions/34181346/java-consumer-group-...原创 2018-06-26 17:42:49 · 18681 阅读 · 3 评论 -
WARN [Producer clientId=console-producer] Connection to node -1 could not be established. Broker may
kafka连接生产者(消费者其实也一样的问题)出现了下面这个报错:(WARN [Producer clientId=console-producer] Connection to node -1 could not be established. Broker may not be available. (org.apache.kafka.clients.NetworkClient)找到配置文件在...原创 2018-06-12 10:58:43 · 42574 阅读 · 12 评论 -
kafka应用之路
1、在技术选型上,为什么要使用kafka,不使用rocketmq?kafka是分布式日志存储系统2、介绍kafka3、kafka安装4、kafka使用(kafka的实践)原创 2018-07-06 20:56:13 · 1522 阅读 · 0 评论 -
Kafka error deserializing key/value for partition
Kafka error deserializing key/value for partition写了一个kafka测试的demo出现了如下错误:这是我kafka的配置: 这是我接收的配置:之前我用别的topic测试了没有问题,换了一个topic出现这个问题,问题的原因在于这个topic序列化的参数改变了,IntegerDeserializer的长度不是4,所以...原创 2018-07-25 14:59:33 · 8073 阅读 · 0 评论 -
Failed to allocate memory within the configured max blocking time 60000 ms
Failed to allocate memory within the configured max blocking time 60000 mskafka生产者写入消息的时候出现了这个问题。网上的一般方法是设置 batch.size = 0,一般都是可以的。具体怎么设置,为什么会出现这个问题,下面我会详细分析。 首先我想了一下,最近代码做过什么变动。我们用kafka放爬取的...原创 2018-08-28 11:54:13 · 12481 阅读 · 2 评论