Spark SQL加载kafka数据并将查询结果写出到kafka的执行过程
说明:本文意在对源码进行分析,说明Spark SQL加载kafka数据并将查询结果写出到kafka的过程,如果错误,欢迎指出,大家共同进步 ^ _ ^。
一、加载kafka数据的代码样例
// 这段代码加载kafka数据源,指定了数据源格式,topic、bootstrap server、offset信息等
Dataset<Row> dataset = this.sparkSession...
原创
2019-08-28 17:47:42 ·
4558 阅读 ·
0 评论