整理总结 --- 大数据开源框架分类

1 、文件存储 :  HDFS、 Tachyon 、KFS S3
2 、离线计算 :  Hadoop MP、 Spark
3 、流式(实时)计算 : Storm、 Spark Streaming、Flink、 S4
4 、资源管理 : YARM、 Mesos
5 、NOSQL数据库 : HBase 、 Redis、 MongoDB
6 、日志收集 : Flume、 Scribe、 Logstash
7 、消息队列 : Kafka、RabbitMQ、 StormMQ
8 、查询分析 : Hive、 Impala、 Presto、 SparkSQL、 Kylin、 Druid
9 、分布式协调服务 : Zookeeper
10、集群管理与监控 : Ambari、 Ganglia、 Nagios、 Cloudera Manager
11、数据挖掘 : 机器学习 、 Spark MLLib
12、数据同步 : Sqoop 、 DataX
13、任务调度 : Oozie、 azkaban
14、数据可视化 : Kibana、 grafana
15、NewSQL : Tidb, cockra
16、时序数据库 : openTSDB, InfluxDB

  • 0
    点赞
  • 1
    收藏
    觉得还不错? 一键收藏
  • 0
    评论

“相关推荐”对你有帮助么?

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值