spark kafka directstream java.io.EOFException: Received -1 when reading from channel, socket has lik

spark directstream 消费kafka数据的时候出现报错
java.io.EOFException: Received -1 when reading from channel, socket has likely been closed.
在这里插入图片描述
val brokers = “hadoop:2181”
val kafkaParams = Map[String,String](“metadata.broker.list” -> brokers,
//smallest : 自动把offset设为最早的offset数据;
//largest : 自动把offset设为最新的offset数据;
“auto.offset.reset” -> “smallest”,
“serializer.class” -> “kafka.serializer.StringDecoder”)
val lines = KafkaUtils.createDirectStreamString,String,StringDecoder,StringDecoder.map(_._2)

问题就在于brokers
brokers是kafka生产者的端口,错在填了ZK的端口,所以无法发现生产数据,所以报错是里边没数据。
只要把brokers="hadoop:9092"就可以正常找到生产数据,并且可以正常消费了。

如果还是有问题就要看看kafka配置文件,server.properties
添加这个配置就好
listeners=PLAINTEXT://:9092
或者直接添加
port=9092
都可以

  • 0
    点赞
  • 1
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值