Kafka 读取不到数据，没有报错信息

最新推荐文章于 2024-03-20 10:50:14 发布
VIP文章 最新推荐文章于 2024-03-20 10:50:14 发布
阅读量6k 收藏 3
点赞数
文章标签： 大数据 python java
原文链接：https://my.oschina.net/u/878584/blog/800362
版权

2019独角兽企业重金招聘Python工程师标准>>> hot3.png

 现象：

         kafka写入和消费一切正常情况，通过一段时间的运行，偶尔发现取不到数据；最后查看kafka消费情况，发现有阻塞。

解决：

1、确认kafka运行情况，是否有堵塞

/kafka/bin/目录下执行

./kafka-run-class.sh kafka.tools.ConsumerOffsetChecker --zookeeper=localhost2181 --group=0

212608_ZKTv_878584.png

被网上一些代码片段坑骗  ~~~~(>_<)~~~~  

212733_Bo2C_878584.png

2、检查代码

    我出现的问题，

最低0.47元/天 解锁文章
weixin_34015566
关注
  • 0
    点赞
  • 踩
  • 3
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
kafka读取写入数据
08-24
kafka读取写入数据
StormStorm集成Kafka 从Kafka中读取数据
03-12
Storm集成Kafka 一、整合说明 二、写入数据到Kafka 三、从Kafka中读取数据 从Kafka中读取数据 Storm从Kafka集群读取数据处理
SparkStreaming与Kafka整合遇到的问题及解决方案
weixin_33728268的博客
08-03 1096
最近工作中是做日志分析的平台，采用了sparkstreaming+kafka，采用kafka主要是看中了它对大数据量处理的高性能，处理日志类应用再好不过了，采用了sparkstreaming的流处理框架 主要是考虑到它本身是基于spark核心的，以后的批处理可以一站式服务，并且可以提供准实时服务到elasticsearch中，可以实现准实时定位系统日志。...
kafka消费数据，有时消费不到原因？
最新发布
beipiao_yizu的博客
03-20 1136
7：消费者客户端启动后未消费消息：如果发现一个消费者客户端已经启动了，但是就是不消费消息，应该检查该消费者所在的组中是否还有其他的消费者。综上所述，解决Kafka消费数据不到的问题，需要从多个方面进行排查和优化，包括但不限于检查配置、调整生产与消费的速度匹配、提高消费者的处理能力、确保网络稳定以及及时处理下游数据等。4：消费者处理能力不足：如果消费者的处理能力不足，例如处理逻辑复杂、计算密集，或者消费者数量较少，无法充分利用集群的并发处理能力，也会导致消费速度慢。
springmvc消费kafka，遇到一个topic消费无反应，但其他的topic正常消费
puxiansen的博客
06-22 1028
springmvc消费kafka，遇到一个topic消费无反应，但其他的topic正常消费
kafka消费不到数据问题
qq_42315376的博客
02-27 7698
kafka消费者不能正常消费的原因与解决方法
Kafka消费不到数据
wildding的博客
05-16 3240
方法1：登录bin/zkCli.sh 然后删除kafka中/brokers/topics/__consumer_offsets 节点。看logdir的目录，换个目录或者删除目录中的数据，本机是 rm -rf datas/* (方法2：停止zookeeper： zk.sh stop 查看conf/zoo.cfg的。：zookeeper报错日志可以在 logs里xxxx.out中查看)：kafka报错日志可以在 logs里 server.log查看)1.首先停止kafka： kafka.sh stop。
Kafka启动成功且运行程序无报错，无法消费数据，即外网无法连接Kafka的消费者或生产者
《@书山有径%》的博客
12-11 4515
Kafka启动成功且运行程序无报错，外网无法连接Kafka的消费者或生产者 sparkStreaming消费kafka中的数据，得不到数据以及无报错信息，找错误如下 首先检查一下，Kafka的消费者和Kafka生成者的Topic是否对应错误，以及其他错误 开启kafka使用下面指令，看kafka是否有错误 /opt/module/kafka/bin/kafka-server-start.sh /opt/module/kafka/config/server.properties 注意程序控制台是否出
Kafka消费者无法消费数据，解决
qq_51651655的博客
08-24 8444
解决Kafka消费者无法消费数据问题
【kafka消息查询】kafka消费不到数据，写入端伙伴说他写入了，而且没有报错，如何来切割是写入的问题还是消费的问题
weixin_40293999的博客
08-07 478
kafka消费不到消息，如何查询界定是生产端的问题还是消费端的问题，特别是场景上下文已经丢失了的时候。kafka参考文档。
Flink入门：读取Kafka实时数据流，实现WordCount
01-07
本文主要介绍Flink接收一个Kafka文本数据流，进行WordCount词频统计，然后输出到标准输出上。通过本文你可以了解如何编写和运行Flink程序。 代码拆解 首先要设置Flink的执行环境： // 创建Flink执行环境 ...
从kafka读取消息C#
10-08
C# Demo，从kafka中读取消息， wpf源码，有需要的同学可以参考
python消费kafka数据批量插入到es的方法
01-20
这是为了方便后期配置的更改，把配置信息放在logging.conf中 用elasticsearch来实现批量操作，先安装依赖包，sudo pip install Elasticsearch2 from elasticsearch import Elasticsearch class ImportEsData: ...
kafka可以正常启动但消费不到数据
Zqq15919158003的博客
07-10 457
Kafka消费不到数据_kafka消费不到数据也不报错_wildding的博客-CSDN博客
一百零八、Kettle采集Kafka数据到HDFS（踩坑，亲测有效）
tiantang2renjian的博客
05-09 2539
Kettle采集Kafka数据到HDFS
Kafka消费不到数据/消费者没有反应
热门推荐
hxc2101的博客
03-06 1万+
问题引言： 在测试kafka最简单的这个案例时，发现消费者端接收不到数据，完全没有反应 bin/kafka-console-producer.sh --broker-list localhost:9092 --topic test bin/kafka-console-consumer.sh --bootstrap-server localhost:9092 --topic test --from-beginning 解决方式 进入zookeeper客户端，将brokers节点下的topics节点
[kafka] 消费没有数据的问题解决Group coordinator lookup failed: The coordinator is not available
07-07 1926
[kafka] 消费没有数据的问题解决Group coordinator lookup failed: The coordinator is not available
【Kafka-BUG】Kafka消息无法正常消费
整理输出各类知识
10-27 1910
Kafka消息无法正常消费
kafka使用时常见的几个错误汇总
paulwang040的博客
11-26 6715
kafka常见错误
kafka 收不到消息_Kafka 读取不到数据，没有报错信息
05-15
Kafka 读取不到数据的原因可能有很多，以下是一些常见的可能性： 1. 消息被消费完了：如果你在一个 topic 的所有 partition 中都消费了所有消息，那么 Kafka 就无法再读取到新的消息。你可以使用 `kafka-console-...

“相关推荐”对你有帮助么？

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值