SparkStreaming两种从Kafka中接收数据的方式
1.基于Receiver(接收器)的方式:使用Receiver来接收Kafka中的数据。Receiver是一个基于Kafka高级消费者API实现的,对于所有接收器来说,这些接收器都是通过Receiver来接收Kafka中的数据并保存数据到 Spark的executor中,之后通过SparkStreaming启动Job来处理这些数据。 然而在默认的配置下,这种方式在某些异常情况下回出现数据丢失情况...
原创
2019-01-03 19:04:50 ·
569 阅读 ·
0 评论