大数据应用组件

1、数据存储
1.1、hive->hdfs、mapredus
1.2、ClickHouse
1.3、Elasticsearch
1.4、PostgreSQL
1.5、HBase

2、数据抽取
2.1、Kettle
2.2、DataX
2.3、Canal
2.4、Flink CDC
2.5、Sqoop
2.6、Filebeat&Logstash(日志)

3、任务编排
3.1、Apache DolphinScheduler

4、数据处理
4.1、spark
4.2、storm
4.3、flink

5、数据分析引擎
5.1、presto
5.2、trino
5.3、StarRocks

6、报表展示
6.1、Davinci达芬奇
6.2、帆软BI
6.3、DataEase
6.4、Prometheus+Grafana
6.5、Kibana

参考资料：常见大数据技术组件及应用场景 (it168.com)