Spark Structured Streaming基于数据动态写入ES Index
Spark structured streaming(注意和spark streaming的区别)写入ES的基本代码如下:// df为需要写入es的Dataset<Row>df.writeStream() .format("org.elasticsearch.spark.sql.checkpoint")// 检查点地址,可不配置 .option("checkpointLocation", CHECKPOINT_PATH)// ES节点 .option(...
原创
2021-12-10 21:29:04 ·
1901 阅读 ·
0 评论