Spark Streaming+Kafka+ES使用笔记
emm
非专业开发,一点笔记
Kafka
当Kafka内容特别大时会报错,此时设置下fetch.message.max.bytes为一个比较大的值就好。
val kafkaParams = Map[String, String]("metadata.broker.list" -> brokers,"fetch.message.max.bytes" -> "10485760" )
...
原创
2019-03-26 14:51:47 ·
5510 阅读 ·
0 评论