Spark streaming整合kafka 并保持上一次记录,scala模板
从kafka中读取数据,用Spark streaming进行实时分析。
import org.apache.kafka.common.serialization.StringDeserializer
import org.apache.log4j.{Level, Logger}
import org.apache.spark.{HashPartitioner, SparkConf}
import org.apache.spark.sql.catalyst.plans.physical.Ha...
原创
2020-07-16 13:50:05 ·
199 阅读 ·
0 评论