seatunnel 简单使用(原名waterdrop)
简介seatunnel 是一个非常易用,高性能、支持实时流式和离线批处理的海量数据处理产品,架构于Apache Spark 和 Apache Flink之上。官方文档:https://interestinglab.github.io/seatunnel-docs/#/安装安装比较简单,参考官方文档即可。配置config.conf 下述配置是从hive中抽数插入到clickhouse中的配置,数据源是hive的一张表,通过seatunnel插件根据id字段进行分片插入clickhouse集群不同
原创
2021-10-26 14:58:47 ·
11004 阅读 ·
10 评论