Aphache Hadoop Ecosystem

现更新地址： http://www.yiyehu.tech/archives/2019/05/23/aphache-hadoop-ecosystem

动物园

• zookeeper：动物管理员，
• Flume：采集，Flume是一种分布式，可靠且可用的服务，用于高效地收集，汇总和移动大量流式事件数据，一个海量日志采集、 聚合和传输的系统
• Sqoop：采集，Sqoop提供了关系型数据库（Mysql，Oracle…）和HDFS之间的相互转换。
• HDFS：Hadoop Distributed File System,Hadoop分布式文件系统，用于存储管理海量数据。
• YARN，Map-Reduce：Yet Another Resource Negotiator，资源协调者，Hadoop 资源管理器，分布式处理框架
• Hive：Hive可以将结构化的数据文件映射为一张数据库表，
  • Hive 定义了简单的类 SQL 查询语言，称为 HQL
• HBase：
  • HBase是一个分布式的、面向列的开源数据库,
  • 适合于非结构化数据存储的数据库,
  • HBase基于列的而不是基于行的模式，列
• Storm：一个分布式的、容错的实时计算系统。