kafka消费者kafka-console-consumer接收不到数据

发送端
在这里插入图片描述
接收端
在这里插入图片描述

问题
采用内置的zookeeper,发送端发送数据,接收端能够接收数据
但是采用外置的zookeeper,发送端发送数据,接收端一直接收不到数据
解决:
先判断主题是否一致,如果一致就在关闭kafka
./kafka-server-stop.sh ../config/server.properties
修改一下配置,确保这些配置已加上,不要用localhost,在listeners的ip地址和端口号要和消费者,生产者的的地址端口号一直
vim ../config/server.propertiesst3
在这里插入图片描述
在这里插入图片描述
最后把log.dirs后面的文件删除或者重新换个地址
rm -rf /tmp/kafka
在这里插入图片描述
重新在前台启动kafka,注意查看打印在桌面的日志,有无报错信息
./kafka-server-start.sh ../config/server.properties
如果没有报错信息,启动正常,那么就可以在后台启动了
./kafka-server-start.sh -daemon ../config/server.properties
创建生产者
./kafka-console-producer.sh --broker-list 172.16.193.175:9092 --topic test3
创建消费者
./kafka-console-consumer.sh --bootstrap-server 172.16.193.175:9092 --topic test3 --from-beginning

  • 5
    点赞
  • 20
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
Kafka的性能可以通过一些参数的优化来提升。首先,文件系统对性能有很大的影响。XFT是一个性能较好的文件系统,它在大部分工作负载下无需额外的调优就能提供较好的性能。此外,可以通过设置文件挂载点的noatime参数来降低磁盘的写操作,进一步提升Kafka的性能。这样可以防止更新atime属性,而不影响ctime和mtime属性的更新。\[1\] 其次,Kafka依赖于I/O性能来提供快速的响应。可以通过调整vm.dirty_background_ratio和vm.dirty_ratio参数来控制脏页的数量。将vm.dirty_background_ratio设置为小于10的值可以减少脏页的数量,而将vm.dirty_ratio设置为大于20的值可以增加刷新到磁盘之前的脏页数量。一般来说,60~80是一个合理的范围。但是需要注意,调整这些参数可能会带来一些风险,如未刷新磁盘操作的数量增加和同步刷新引起的长时间I/O等待。如果将vm.dirty_ratio设置为较高的值,建议启用Kafka的复制功能,以避免数据丢失。\[2\] 此外,内存也对Kafka的性能有影响。消费者从分区尾部读取消息时,消息会直接存放在系统的页面缓存中,这比从磁盘上重新读取要快得多。因此,Kafka大量使用系统页面缓存。如果虚拟内存被交换到磁盘,说明已经没有多余的内存可以分配给页面缓存了。可以通过调整vm.swappiness参数的值来控制虚拟内存的使用,建议将其设置为较小的值,如1,以减小页面缓存并避免进行内存交换。\[3\] 综上所述,通过优化文件系统、调整脏页参数和控制虚拟内存的使用,可以提升Kafka的性能。 #### 引用[.reference_title] - *1* *2* *3* [Kafka参数配置及性能优化](https://blog.csdn.net/lq0954/article/details/123131603)[target="_blank" data-report-click={"spm":"1018.2226.3001.9630","extra":{"utm_source":"vip_chatgpt_common_search_pc_result","utm_medium":"distribute.pc_search_result.none-task-cask-2~all~insert_cask~default-1-null.142^v91^control_2,239^v3^insert_chatgpt"}} ] [.reference_item] [ .reference_list ]

“相关推荐”对你有帮助么?

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值